Боты грузят хостинг

[romaamor]

В robots.txt -
Параметр Crawl-delay указывает поисковому роботу чтобы он загружал страницы вашего сайта с интервалом не менее 10 секунд, другими словами просто выдерживал паузу во время индексации страниц вашего сайта. И ваш сайт спокойно индексируется в пределах допустимой нагрузки. Вы можете менять интервал по своему усмотрению, делая его больше или меньше.
User-agent: *
Crawl-delay: 10

[нахалтуру]

User-agent: *
Crawl-delay: 10

попробую но не уверен. что эти боты вопринемаются системой как боты это же не поисковики а просто программы на компьютере

Отправлено спустя 2 минуты 48 секунд:
вроде уменьшаются посетители ), подождём

[Sumanai]

прочтите тему выше с начала и вникните в суть проблемы

Прочёл, вник. Так и не понял, что за "по винде".
Вижу, что вас грузят боты спаммеров, но вы так и не соизволили предоставить их юзерагенты.

[нахалтуру]

Вижу, что вас грузят боты спаммеров, но вы так и не соизволили предоставить их юзерагенты.

а я вижу что вы просто хотите поругатся

[Sumanai]

Без предоставления юзерагентов ботов невозможно подсказать регулярное выражение для их бана через вебсервер.

[Татьяна5]

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)

[нахалтуру]

Без предоставления юзерагентов

ну какие юзерагенты у вас с нами .мы же тоже заходим через браузер на сайт,но руками,а программы например у вас на компе это будут делать на автомате и какие там юзерагенты?

Отправлено спустя 2 минуты :

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)

так я про это речь и виду,только нужно блокировать не полностью по Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1) потому что так будет тоже самое что и по ай пи ,а только по типу опирационной системы,потому что она у всех одинакова

[Sumanai]

Татьяна5, это не он выложил, а Siava, он лишь сказал, что чем-то похоже.

,а программы например у вас на компе это будут делать на автомате и какие там юзерагенты?

Я у вас и спрашиваю, какие. Ваш сайт, на вашем сайте нагрузка от них.

а только по типу опирационной системы,потому что она у всех одинакова

Ага. У всех. И у пользователей такая же.

[нахалтуру]

Ага. У всех. И у пользователей такая же.

нет не такая.вижу вы решили со мной спорить и тролить,больше вам не отвечаю
у них операционка умных чайников,если вы себя к оным относите-вопросов больше не имею и вас добавил в чёрный список поэтому ваши все сообщения более не вижу.

[Sumanai]

нет не такая.

Но предоставить пример не можете

больше вам не отвечаю

Надеюсь вам ответят взаимностью

[нахалтуру]

User-agent: *
Crawl-delay: 10

не помогло

[KEMnEP]

http://zirnet.ru/seo-1.html очень подробно описано и разные способы
Очень рекомендую через .htaccess заблокировать в том числе зеркальщик сайтов для офлайн просмотра

Код: Выделить всё

SetEnvIfNoCase User-Agent "^HTTrack" bad_bot

Ибо только его едино кратный проход может поднять нагрузку в десятки раз.

[rst]

Хорошая тема. У меня через каждые 5 минут в логах идут попытки регистрации перебором ников.

[нахалтуру]

http://zirnet.ru/seo-1.html очень подробно описано и разные способы
Очень рекомендую через .htaccess заблокировать в том числе зеркальщик сайтов для офлайн просмотра

сделал как там,вроде стало он лайн 60 человек.а то до этого меньше сотни никогда онлайн не было

[нахалтуру]

трафик немного уменьшился,но нагрузки на сервер пока нет