Нагрузка на сервер

[KEMnEP]

Яндекс любит нагружать особенно если для ботов в роботсе кравделей не выстовлен. Поставте побольше. Из расчёта чтоб запросов в сутки было больше чем всех тем.
https://yandex.ru/support/webmaster/con ... s-txt.html более подробней

Отправлено спустя 7 минут 18 секунд:
Ну и конечно версию пхп для форума не ниже 7 (если форум phpBB 3.2.х)

[PintPont]

Яндекс любит нагружать особенно если для ботов в роботсе кравделей не выстовлен. Поставте побольше. Из расчёта чтоб запросов в сутки было больше чем всех тем.
https://yandex.ru/support/webmaster/con ... s-txt.html более подробней

Отправлено спустя 7 минут 18 секунд:
Ну и конечно версию пхп для форума не ниже 7 (если форум phpBB 3.2.х)
Вернуться к началу

Спасибо. пхп 7 и стоит. Про роботса сделаю

[PintPont]

Яндекс любит нагружать особенно если для ботов в роботсе кравделей не выстовлен. Поставте побольше. Из расчёта чтоб запросов в сутки было больше чем всех тем

не могу понять как это сделать.

[KEMnEP]

Код: Выделить всё

User-agent: *
Crawl-delay: 5

к примеру так. Все послушные боты, в том числе и яндекс, будут посещать форум не чаще раз в 5 секунд, что даст за сутки не больше 432000 индексаций страниц от одного бота.

[PintPont]

User-agent: *

веб мастер яндекс выдает ошибку на эту запись

[nissin]

PintPont,
https://yandex.ru/support/webmaster/con ... rawl-delay

В директиве для Яндекса максимально допустимым значением является 2.0

Примеры:

Код: Выделить всё

User-agent: Yandex
Crawl-delay: 2.0 # задает таймаут в 2 секунды

Код: Выделить всё

User-agent: *
Disallow: /search
Crawl-delay: 1.5 # задает таймаут в 1.5 секунды

Отправлено спустя 6 минут 20 секунд:
Хм, в другом месте пишут, что директива не работает и нужно в Вебмастере менять:
https://webmaster.yandex.ru/blog/skoros ... rawl-delay

[PintPont]

nissin, поставил вот так User-agent: * Crawl-delay: 2.0 , но все равно ругается, или позже исправится?

Отправлено спустя 1 минуту 12 секунд:

Хм, в другом месте пишут, что директива не работает и нужно в Вебмастере менять

там смотрел стоит 0.6

[nissin]

PintPont, это уже с поддержкой яндекса решать, почему ругается.

[PintPont]

nissin, меня вот этот бот нагружает, не знаю что с ним делать- полностью блокировать не выход. 37.9.113.131 (37-9-113-131.spider.yandex.com) Может дадите какой совет?

[KEMnEP]

веб мастер яндекс выдает ошибку на эту запись

ну он там так то и подсказку пишет что ненравится.

[PintPont]

ну он там так то и подсказку пишет что ненравится.

было написано типо не может быть 2 значения, я удалил эти строки и пропало.

[KEMnEP]

И да. Примечание появилось сравнительно недавно, когда я боролся с нагрузкой его не было, да и сейчас проверил, на роботс не ругается в вебмастере даже на 5. Так что там скорей всего ошибка в позиционировании формы, а не в самой форме

[PintPont]

Так что там скорей всего ошибка в позиционировании формы, а не в самой форме
Вернуться к началу

Отправил им вопрос, жду ответа.

[KEMnEP]

ну он там так то и подсказку пишет что ненравится.

было написано типо не может быть 2 значения, я удалил эти строки и пропало.

что и говорил

[southklad]

У меня вот так и никто не ругается Crawl-delay: 10