robots.txt для 3.x

[Татьяна5]

Для бота гугла установлен основной стиль форума?

[Thoral]

Для бота гугла установлен основной стиль форума?

Проверил -- да, основной. И для Яндекса. А Яндекс тоже лезет на тег style, очень много страниц. Причём статус ОК 200 не смотря на клининг в роботсе. Возможно позже отсеет...

Заодно попробую добавить тег p= в клининг. Возможно обход идёт быстрей по внутренним ссылкам (в т.ч. на конкретные посты), но постовых ссылок слишком много, для робота это дополнительная работа на проверку с канонической версией (которая естественно без p).

[dimassamid]

Сегодня тоже получил от Яндекса уведомление о дублирующем контенте. Не нравятся ему f в качестве GET-параметров. Это немного странно, т.к. каждая страница имеет канонический адрес, где никакой f нету. Так или иначе, прописал в robots.txt clean-param как в этом сообщении, запросил проверку, но пока безрезультатно, капризничает. Буду разбираться дальше.

Я до сих пор не понимаю в каких случаях тема отображается с f, а в каких без. В самом viewforum с какой-то версии движка эти f-ки у тем пропали. Интересно, почему? А вот, к примеру, во всех расширениях f-ка всё ещё используется.

Гуру, поделитесь секретом, для чего вообще используются ID форумов в viewtopic, ведь достаточно только ID самих тем? Более того, если тему переместить в другой форум, она всё равно останется доступной по ссылке со старым форумным ID. В чём их смысл?
Я помню, когда пользовался ещё двойкой (phpbb 2), там вроде бы без этих f-ок обходились.

[Nekstati]

для чего вообще используются ID форумов в viewtopic, ведь достаточно только ID самих тем?

Эта тайна скрыта в глубине веков. Технически в phpBB 3.0 этот параметр влиял на отображение "важных тем" (global announcements). А именно, если важная тема была создана в форуме, которому заданы какие-то особенные настройки, например особый стиль, то этот стиль зависел от forum_id в адресной строке. Но что мешало получать этот ID с помощью SQL-запроса, как сейчас, - знают только самые древние и мудрые летописцы на Высоком Хротгаре.

[rxu]

Так исторически сложилось еще с двойки (единицу не застал, может и оттуда). В те времена сервера были слабоваты и почти 100% людей сидело на шаринге. Чтобы сэкономить производительности на SQL запросах, параметр подставлялся в URL и передавался через GET запрос.

[Siava]

сложилось еще с двойки

Вот не помню у себя в старой двойке, чтобы эти f присутствовали в адресе тем

[dimassamid]

Нет, в старой двойке их нет. Я сегодня устанавливал различные версии из архива phpBB. В последней 2.0.23 их нет. Они появились c версии 3.0.0 и были выпилены начиная с 3.3.5.
https://tracker.phpbb.com/browse/PHPBB3-16138

[rxu]

Посмотрел код двойки, действительно, там нет форумов в строке. Ну значит с начиная тройки, давно было дело - 15 лет назад, сути не меняет.

[TomRX]

Здравствуйте.
Яша снова придирается, никак успокоится не может. Критичная ошибка. Некоторые страницы с GET-параметрами в URL дублируют содержимое других страниц (без GET-параметров). GET-параметр - t

Код: Выделить всё

https://fialka.tomsk.ru/forum/viewtopic.php?t=53704&p=525771
https://fialka.tomsk.ru/forum/viewtopic.php?p=525771

https://fialka.tomsk.ru/forum/viewtopic.php?t=21751&p=526312
https://fialka.tomsk.ru/forum/viewtopic.php?p=526312

И это несмотря на то, что в роботсе у меня указано Disallow: /forum/viewtopic.php?*p=*

Код: Выделить всё

https://fialka.tomsk.ru/robots.txt

Выручайте...

[vit_pro]

TomRX, не только у тебя такая беда У них требования и критерии стали на столько не понятны, что следить за ними я просто бросил. Они то пишут ошибки устранены, то через три дня у вас проблемы с тем же.. Я не обращаю внимание, яндекс с форума не вылазит, а что у него там не срастается, мне без разницы

[Perfecthus]

Добавьте в robots.txt

Код: Выделить всё

Clean-param: sid&view&f&t /forum/index.php
Clean-param: sid&view&f&t /forum/viewforum.php
Clean-param: sid&view&f&t /forum/viewtopic.php

Глядишь и жизнь наладится!

А, вообще, читать надо руководство в справке яшки по get-параметрам, там всё доходчиво разъясняется.

[Siava]

Глядишь и жизнь наладится

Ну такое))
Перестанут индексироваться разделы форумов (параметр f у viewforum) и отдельные темы (параметр t у viewtopic).

[Perfecthus]

Так это тоже get-параметры, яшка на них и ругается. Не запрещать их через disallow, а именно как get-параметр, вроде как должен индексировать нормально.

[southklad]

Ну такое))

А реально как то возможно это решить?

[Perfecthus]

https://yandex.ru/support/webmaster/rob ... param.html