Атака китайских ботов

[hd321kbps]

Сегодня заметил на нескольких форумах наплыв ботов из китая от 100-300 одновременно, которые создают нагрузку на хостинг.
Все заходят с телефона Android и iphone Os.
Адреса ботов:
54.222.*.*
54.223.*.*
52.80.*.*
52.81.*.*
52.82.*.*
52.83.*.*
220.243.*.*
139.217.*.*
139.219.*.*
У кого наблюдается такое-же отпишитесь)


---------------------------
Варианты блокировки ботов:
Re: Атака китайских ботов - от Nekstati
Re: Атака китайских ботов - от Kuskow, php
Re: Атака китайских ботов - от Kuskow, nginx

[Kuskow]

Perfecthus, кажется, Вы не сбросили кэш. Вы уже несколько раз поменяли core.js, но assets_version всё тот же.

Код: Выделить всё

./assets/javascript/core.js?assets_version=2288

После изменения этого файла надо зайти в админку форума и сделать "Очистить кэш".

[Perfecthus]

Очистил кэш физически на сервере - заработало. Я так понимаю, в этой строке $_SERVER['HTTP_USER_AGENT'] = 'Googlebot/'; } вместо Googlebot, можно любое слово написать?

[Kuskow]

Нет, нужно написать не вообще любое слово, а которое есть в списке ботов. Чтобы не думать об этом, проще оставить как написано, не меняя. Google всегда присутствует и без того, просто теперь под обозначением Google будут все боты.

[Perfecthus]

не любое слово, а которое есть в списке ботов

Да с этим-то понятно всё.

Американские и прочие ненужные гости с форума исчезли, понаблюдаю, как дальше будет.

[Perfecthus]

просто теперь под обозначением Google будут все боты

Т. е. теперь даже зарегистрированных ботов не увидеть с их настоящим user-agent?

[Kuskow]

Да, именно так. Все они на одно лицо.

[Perfecthus]

Kuskow, Да, это я уже заметил. Кстати, проверил через Яндекс вебмастер , что некоторые страницы отдают боту Яндекса код 301. Не скажется ли сие на индексации и выдаче?

ПС: Покамест полет нормальный, «иноземцы» пропали. Хотя итак не особо мешали, но к чему они нужны.

[Perfecthus]

кажется, Вы не сбросили кэш

Похоже, что я и сам код нормально переписал под php 7.4, но в прошлый раз я кэш не удалил и мне отдавало 410 код в браузере. А я уж думал, что совсем забыл, как кодить.

[Perfecthus]

И вот еще что...

1792487189569.jpg

После добавления кода, страница 404 отдает 410 код.
Думаю, что это ни есть хорошо!

[Kuskow]

А откуда этот скриншот? Кто такое сообщает?

некоторые страницы отдают боту Яндекса код 301

Не просто некоторые, а большинство. И не только боту Яндекса, а вообще всем ботам, а также людям, зашедшим впервые.
Вот тут я рассказал, почему это хорошо Re: Индексация поисковиками

Не скажется ли сие на индексации и выдаче?

Ещё как скажется! Вот тут рассказал, что будет Re: Индексация поисковиками

[Kuskow]

некоторые страницы отдают боту Яндекса код 301

Я сейчас смотрю на Вашем сайте - не срабатывает это, почему-то. Хотя если вставили мой код, то должно. У меня такая ссылка:

Код: Выделить всё

https://www.phpbbguru.net/community/viewtopic.php?p=573047#p573047

перенаправляет на такую страницу:

Код: Выделить всё

https://www.phpbbguru.net/community/viewtopic.php?t=49135&start=765#p573047

А на Вашем сайте такое перенаправление не срабатывает, почему-то.

[Perfecthus]

Кто такое сообщает?

Анализ сайта pr-cy.ru

[Kuskow]

Ничего страшного, в общем. Это о том, что код ошибки 410, а на самой странице написано 404. Когда есть код ошибки, то боты уже не смотрят на содержание страницы - оно только для людей.

[Michel]

Ну вроде отстали, отбивался как только мог . Пошло на убыль.

11.jpg