Высокая загрузка CPU практически постоянно

[Leo Angel]

Приветствую.
Никак не могу понять ЧТО грузит CPU.
Практически постоянно загрузка на уровне 60-65%.
Раньше грузили китайские боты.
Вчера смотрел гостей - очень много гостей из сети 47.254.ххх.ххх - какие-то американцы.
Обратился в поддержку хостера.
Вот их ответ:

Проверили логи доступа к сайту и наблюдаем огромное количество подключений от Adsbot.

Почитал про этого бота - AdsBot-Google – это робот поисковой системы Google, который сканирует и определяет качество страниц, на которых подключена контекстная реклама AdWords. Контекстная реклама AdWords у меня не подключена. Правда, есть реклама от Google на форуме - AdSense.

Вопрос.
Что делать? Как снизить нагрузку CPU? И как такое может быть - у меня CPU: Intel® Xeon® 1 vCPU core, неужели его не хватает для форума?
И ещё связаны ли гости из сети 47.254.ххх.ххх с этим гугло-ботом или это две отдельные "нагрузки"?
Можно ли кого-то запретить? Раньше, когда запретил "китайским друзьям" заходить на форум, всё наладилось. А теперь вот опять...
Короче говоря, нужна помощь.

Заранее спасибо.

[Siava]

Насколько я понимаю, Adsbot не гуглбот. У гугла свой бот и его название связано с Adsense.
Я у себя на форуме, хоть они нагрузку не создают, но последнее время потихоньку блокирую мусорных SEO-ботов, оставляя только поисковые.

Отправлено спустя 3 минуты 6 секунд:

у меня CPU: Intel® Xeon® 1 vCPU core

Если бы он полностью и железно был бы вашим, то хватило с головой. Но это всё виртуальные CPU, тем более всего 1 ядро.

[Leo Angel]

Поддержка предлагает заблокировать этого бота.
Соглашаться?
Боюсь чего испортить...

[Siava]

Leo Angel, у гугла AdsBot-Google. Просто AdsBot - в мусор.

[Leo Angel]

Спасибо!
Попрошу поддержку, чтобы заблокировала.
И посмотрю что и как.

Отправлено спустя 2 часа 44 минуты 16 секунд:
Поддержка закрыла этого бота. Но это не отразилось на загрузке CPU.
Насколько я понял, нагрузку делают гости с адресов 47.254.ххх.ххх.
Их просто огромное множество.
Всех бы их заблокировать бы, да и дело с концом...

[Пчелкин]

Intel® Xeon® 1 vCPU core

100% что на этом ядре ваш форум не один. Минимум штук восемь.

Практически постоянно загрузка на уровне 60-65%.

Обычный развод хостеров с принуждением оформления более мощных данных для форума. Все это когда нибудь проходят.

Отправлено спустя 1 минуту 48 секунд:

47.254.ххх.ххх - какие-то американцы.

Ну и что? Они шарятся по кешу.. Да хоть тыща одновременно. Это не может дать такую нагрузку
Повторю - обычный развод хостеров - это 99%

[rxu]

нагрузку делают гости с адресов 47.254.ххх.ххх.

Юзер агент у них одинаковый или нет?

[Leo Angel]

А как посмотреть user-agent?

[Siava]

Leo Angel, на странице "Кто сейчас на форуме" как вариант

[Leo Angel]

Лазят по форуму везде вот такие твари -
Alibaba.com LLC AL-3 (NET-47-250-0-0-1) 47.250.0.0 - 47.254.255.255
ALICLOUD-US ALICLOUD-US (NET-47-254-0-0-1) 47.254.0.0 - 47.254.127.255
Причём, с разных подсетей - и с 47.88.х.х - 47.91.255.255 тоже появились.

И как их всех закрыть?

[southklad]

Уходите от хостера, была такая же байда, боты им все грузили, ушел на Виртуальный сервер и все, теперь сам вижу что НИФИГА они ничего не грузят

[rxu]

И как их всех закрыть?

Если юзерагенты только эти, добавить их как двух ботов через админку, и будет у них по одной сессии.

[doremyka]

Leo Angel, у меня они давно заблокированы. Я блокирую гадов, не дожидаясь проблем.
Вот эта алибаба и сообщники:
deny from 47.250.0.0/15 47.251.0.0/17 47.250.20.0/22
deny from 47.251.0.0/21 47.251.8.0/21
deny from 47.252.0.0/17 47.252.0.0/18 47.252.0.0/20 47.252.0.0/22 47.252.4.0/22 47.252.16.0/20
deny from 47.254.0.0/16 47.254.0.0/17 47.254.0.0/18 47.254.16.0/21 47.254.24.0/21 47.254.32.0/21 47.254.40.0/21 47.254.64.0/21 47.254.128.0/19 47.254.72.0/21 47.254.80.0/21 47.254.88.0/21 47.254.160.0/19 47.254.192.0/19

[doremyka]

Leo Angel
Вы нашли, источник нагрузки?
После вашей темы обратила внимание, что при входе на хостинг появлялась существенная нагрузка CPU. Если обычно 5-20 из 100%, то засекала 50, 60 и даже 70%.
У меня с 18 августа нашествие из США, а конкретно из штата Иллинойс. Идёт по нарастающей, на вчерашний день было увеличение от среднего в 2 раза. Сегодня уже больше, чем вчера за весь день. Там входы разовые, но меня беспокоит. Не может один человек за сутки зайти на форум 386 раз и посмотреть по 1 странице. Спрашивается, что ему надо, и кто это вообще.

Ещё меня спамил бот bingo, просто весь лог забит! Заблокировала все IP, которые видела, но на странице "Кто сейчас на конференции" он всё равно висел. Причем с IP, который был уже заблокирован. Только вечерний лог показал код 403. Сегодня его не было ни разу, уф.

[Siava]

бот bingo

bing - это поисковик
Поисковики лучше ограничивать, но не банить совсем.
https://www.bing.com/webmaster/help/cra ... l-55a30302