С утра сильно возросла нагрузка на сервак. Стал смотреть логи сервера и увидел, что один и тот же IP очень часто делает запросы к сайту. Раньше я блочил такие IP через файл .htaccess, но было неудобно когда IP постоянно меняются. Надо заходить на ftp, открывать этот файл и там добавлять новые адреса, поэтому решил в этот раз сделать через плагин.
Плагин называется WP-Ban, он очень простой, там указывается IP-адрес в разделе "Banned IPS", которому будет запрещен доступ к вашему сайту. И проблема была решена.