Необходимо снизить активность роботов (ботов).

[AlexJoker]

Уважаемые господа!

Необходимо снизить активность роботов (ботов) – один и тот же бот может "прочёсывать" форум с периодичностью 3 часа. Как задать количество дней, через которое бот может посещать форум? Я знаю, что для html можно использовать тэг <META NAME="revisit-after" CONTENT="3 days"> - регулярность захода роботов 3 дня. Пройдёт ли этот способ, если вставить данный тэг в файл overall_header.tpl? Или ещё можно что-то сделать?
Заранее благодарю за ответ.

P.S. В поиске ничего не нашёл…

[Xpert]

Думаю, вполне можно использовать этот мета-тег, место вставки указано абсолютно верно - overall_header.

[AlexJoker]

Спасибо. Попробую...

[Merera]

AlexJoker
Это странно очень. Яндекс и Рамблер ходят раз в неделю - много, Гугол и MSN - чуть почаще. Имеет смысл посмотреть в логе какой приходит USER-AGENT и написать администрации, разобраться, отчего такая активность бешеная.

[The-eBook]

Яндекс может каждые три-пять часов колбасить сайт. Ему надо просто ограничить зону поиска, применяя robots.txt

[Merera]

Про robots.txt - полностью согласен. Минимальный джентльменский набор ограничений, на мой взгляд, следующий (разумеется, надо добавить путь к форуму от вершины сайта):

Код: Выделить всё

User-agent: *
Disallow: /images/
Disallow: /templates/
Disallow: /login.php
Disallow: /search.php
Disallow: /posting.php
Disallow: /privmsg.php
Disallow: /faq.php
Disallow: /memberlist.php
Disallow: /groupcp.php
Disallow: /viewonline.php