огромное количество GET запросов

[mongolor]

итак. заходя в админку своего хостера уже который раз вижу предупреждение о критической нагрузке.

спросил у хостера в чем проблема, ответили мол:

Нагрузка была вызвана (я смотрел за 14 октября с 19:30 до 19:45 то есть за
максимальную нагрузку) большим обращением за 15 минут (порядка 1900 запросов).

Много обращений было к самому сайту, то есть за 14/Oct/2007:19:30 то есть за
1 минуту 94 обращения, IP адреса разные. Обращения вида "GET
http://motopian.ru/phpBB2/templates/sub ... llpic1.gif" 304 -
"http://motopian.ru/phpBB2/viewtopic.php?p=28343" "Mozilla/4.0 (compatible;
MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727; InfoPath.1)"

кто-нибудь может что-нибудь подсказать поэтому поводу? чем вызвано такое огромное кол-во запросов?

ах да, используеться в связке с mkportal, стоит достаточное кол-во модов,

Добавлено спустя 32 минуты 5 секунд:

Моды:
admin_users_list
allow_multiple_domains_1.0.1
anti-bot-question_v_1_0_3
birthday_1.5.9em_240
eqr_3.0.5
first_post_on_every_page_1.0.1
post_is_sending_1.1.2
adv_posts_merging_2.1.2
topics_sorted_by_type_1.1.0
mod_sql_caching_110

[Xpert]

Нужно знать все запросы, а не вида такого-то.

[mongolor]

Код: Выделить всё

89.253.17.119 - - [15/Oct/2007:00:00:43 +0400] "GET http://motopian.ru/phpBB2/viewforum.php" 200 77209 "http://motopian.ru/phpBB2/viewtopic.php?t=1529" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.0.12) Gecko/20070508 Firefox/1.5.0.12"

89.253.17.119 - - [15/Oct/2007:00:01:08 +0400] "GET http://motopian.ru/phpBB2/templates/subSilver/subSilver.css" 304 - "http://motopian.ru/phpBB2/viewtopic.php?t=1584" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.0.12) Gecko/20070508 Firefox/1.5.0.12"

84.17.27.33 - - [15/Oct/2007:00:01:19 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/mtshapka.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:21 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_forum.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:23 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_cpapers.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:21 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_foto.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:23 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_racconti.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

90.156.167.24 - - [15/Oct/2007:00:00:39 +0400] "GET http://motopian.ru/phpBB2/posting.php" 200 29259 "-" "Link.RU bot"

84.17.27.33 - - [15/Oct/2007:00:01:30 +0400] "GET http://motopian.ru/phpBB2/templates/subSilver/subSilver.css" 304 - "http://motopian.ru/phpBB2/index.php" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:21 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_blog.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:24 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/f1.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

83.167.112.26 - - [15/Oct/2007:00:02:35 +0400] "GET http://motopian.ru/mkportal/templates/Forum/mkp.js" 200 9424 "http://motopian.ru/phpBB2/viewtopic.php?t=1526" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.1.7) Gecko/20070914 Firefox/2.0.0.7"

84.17.27.33 - - [15/Oct/2007:00:01:17 +0400] "GET http://motopian.ru/phpBB2/templates/subSilver/subSilver.css" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:26 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/search.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

83.167.112.26 - - [15/Oct/2007:00:02:36 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_urlo.gif" 200 1035 "http://motopian.ru/phpBB2/viewtopic.php?t=1526" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.1.7) Gecko/20070914 Firefox/2.0.0.7"

83.167.112.26 - - [15/Oct/2007:00:02:36 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/mtshapka.gif" 200 8472 "http://motopian.ru/phpBB2/viewtopic.php?t=1526" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.1.7) Gecko/20070914 Firefox/2.0.0.7"

84.17.27.33 - - [15/Oct/2007:00:01:20 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_home.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:24 +0400] "GET http://motopian.ru/phpBB2/templates/subSilver/images/msg_sentbox.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

84.17.27.33 - - [15/Oct/2007:00:01:25 +0400] "GET http://motopian.ru/phpBB2/templates/subSilver/images/msg_outbox.gif" 304 - "http://motopian.ru/phpBB2/privmsg.php?folder=inbox" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)"

83.167.112.26 - - [15/Oct/2007:00:02:36 +0400] "GET http://motopian.ru/phpBB2/templates/quick_reply.js" 200 7212 "http://motopian.ru/phpBB2/viewtopic.php?t=1526" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.1.7) Gecko/20070914 Firefox/2.0.0.7"

89.253.17.119 - - [15/Oct/2007:00:00:41 +0400] "GET http://motopian.ru/phpBB2/viewforum.php" 200 0 "http://motopian.ru/phpBB2/viewtopic.php?t=1529" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.0.12) Gecko/20070508 Firefox/1.5.0.12"

89.253.17.119 - - [15/Oct/2007:00:01:08 +0400] "GET http://motopian.ru/phpBB2/viewtopic.php" 200 81646 "http://motopian.ru/phpBB2/viewforum.php?f=5" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.0.12) Gecko/20070508 Firefox/1.5.0.12"

83.167.112.26 - - [15/Oct/2007:00:02:36 +0400] "GET http://motopian.ru/phpBB2/templates/subSilver/images/lang_russian/post.gif" 200 1632 "http://motopian.ru/phpBB2/viewtopic.php?t=1526" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.1.7) Gecko/20070914 Firefox/2.0.0.7"

83.167.112.26 - - [15/Oct/2007:00:02:35 +0400] "GET http://motopian.ru/mkportal/templates/Forum/images/atb_home.gif" 200 1025 "http://motopian.ru/phpBB2/viewtopic.php?t=1526" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.1.7) Gecko/20070914 Firefox/2.0.0.7"

вот часть лог файла

и вот полный Лог-файл (12 Мб) http://kina.jino-net.ru/access_log

[Поручик]

Какой-то взбесившийся бот вас дергает. Посмотрите по ip-адресу.

[mongolor]

ну в основном у разных ip разные привзяки.
на поисковых ботов стоит robots.txt

Код: Выделить всё

User-agent: *
Disallow: /

[Поручик]

robots.txt - это для культурных ботов, типа гугля, яндекса, etc. А некоторые другие плевать на него хотели.

[mongolor]

А есть какие нибудь средства для борьбы с ними?

[crash]

А есть какие нибудь средства для борьбы с ними?

банить например, через .htaccess

[mongolor]

да но никак ниузнать что за боты, а ip всегда разные

а могут ли еще как нибудь формироваться данные запросы?