Трям.
Получил от яндекса письмо с таким содержанием:
Здравствуйте roman!
На вашем сайте https://satellitetvforum.info некоторые страницы с GET-параметрами в URL дублируют содержимое других страниц (без GET-параметров). Например, https://example.com/tovary?from=mainpage дублирует https://example.com/tovary. Из-за их обхода информация о важных для вас страницах может медленнее передаваться в поисковую базу, что может влиять на состояние сайта в поиске.
Вот примеры страниц и дублирующих их страниц с незначащими GET-параметрами:
keywords:
https://satellitetvforum.info/search.php
https://satellitetvforum.info/search.ph ... sat+ns-889
keywords:
https://satellitetvforum.info/search.php
https://satellitetvforum.info/search.ph ... ds=Hdrezka
keywords:
https://satellitetvforum.info/search.php
https://satellitetvforum.info/search.ph ... 1%82%D1%8B
keywords:
https://satellitetvforum.info/search.php
https://satellitetvforum.info/search.ph ... 0%BE%D0%BC
keywords:
https://satellitetvforum.info/search.php
https://satellitetvforum.info/search.ph ... ack%5C+150
Если эти страницы действительно являются дублями, рекомендуем использовать директиву Clean-param в robots.txt, чтобы робот игнорировал незначащие GET-параметры и объединил все сигналы со страниц-копий на основной странице.
Как оставить в поиске нужную страницу
Добавьте в файл robots.txt директиву Clean-param, чтобы робот не учитывал незначащие GET-параметры в URL. Робот Яндекса, используя эту директиву, не будет много раз обходить повторяющийся контент. Значит, эффективность обхода повысится, а нагрузка на сайт снизится.
Если вы не можете добавить директиву Clean-param, укажите канонический адрес страницы, который будет участвовать в поиске. Это не уменьшит нагрузку на сайт: роботу Яндекса всё равно придётся обойти страницу, чтобы узнать о rel=canonical. Поэтому мы рекомендуем использовать Сlean-param как основной способ.
Собственно вопрос - что именно надо прописать в robots.txt ?
Настройка директивы clean-param
Правила форума
Местная Конституция | Шаблон запроса | Документация (phpBB3) | Переход на 3.0.6 и выше | FAQ | Как задавать вопросы | Как устанавливать расширения
Ваш вопрос может быть удален без объяснения причин, если на него есть ответы по приведённым ссылкам (а вы рискуете получить предупреждение
).
Местная Конституция | Шаблон запроса | Документация (phpBB3) | Переход на 3.0.6 и выше | FAQ | Как задавать вопросы | Как устанавливать расширения
Ваш вопрос может быть удален без объяснения причин, если на него есть ответы по приведённым ссылкам (а вы рискуете получить предупреждение

-
- Поддержка
- Сообщения: 5426
- Стаж: 20 лет 3 месяца
- Откуда: Питер
- Благодарил (а): 177 раз
- Поблагодарили: 749 раз
Re: Настройка директивы clean-param
Страницу search.php можно вообще исключить из поиска.
Тема закрыта, так как дубль: robots.txt для 3.x
Тема закрыта, так как дубль: robots.txt для 3.x
Еще одно нарушение правил и будете забанены. © Mr. Anderson
Ты очистил кеш? © Sheer
https://siava.ru (phpbb2.0.x 3.5.x)
Ты очистил кеш? © Sheer
https://siava.ru (phpbb