robots.txt для 3.x

[vit_pro]

А реально как то возможно это решить?

За деньги. Кто нибудь писал в техничку яндекс с просьбой о настройках?
Я писал. На следующий день звонок, 15 минут выноса мозга о том, что у вас все в общем-то не плохо, вы и сами можете двигаться..НО, ежли вы хотите подключить наших специалистов, то мы бесплатно просмотрим ваши позиции...а потом сообщим стоимость
Яндекс- это только деньги. С гуглом еще можно соревноваться. Бинг, не преступен, свои алгоритмы (недавно только с ним связался)

[Татьяна5]

Perfecthus, в коде сказано "игнорировать номера тем и форумов, а также страниц в них", то есть яндекс будет считать что есть одна страница форума и одна страница темы, а всё остальное - дубли

[vit_pro]

то есть яндекс будет считать что есть одна страница форума и одна страница темы, а всё остальное - дубли

И тем не менее он их включает в индекс, а потом исключает. Переодичность 2-3 дня сообщения. Проиндексированы: 20 включено, потом через 2 дня сообщение 20 исключено и это гуляет постоянно. Т.е. у них нет твердой позиции по теме, что она востребована, что в теме 5-7-10 страниц общения, они ее могут полностью выкинуть из индекса если...Вот, что если? Если неделю там никто не был, или месяц?
Мне прямо сказали, хотите внимание, размещайте рекламу от нас:)

[Татьяна5]

Вот, что если?

Насколько помню, там ИИ задействовали, так что они сами не знают "что если"

[Perfecthus]

Перестанут индексироваться разделы форумов (параметр f у viewforum) и отдельные темы (параметр t у viewtopic)

Тогда так:

Код: Выделить всё

Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid&view /viewtopic.php

Но, на get-параметры &f и &t яшка всё-равно будет продолжать ругаться. Думаю, что просто не обращать на него внимание и всё...

[jd8615]

Код: Выделить всё

Clean-param: view&t&f /viewtopic.php

И ругаться перестанет

Отправлено спустя 4 минуты 42 секунды:

отдельные темы (параметр t у viewtopic).

Есть же viewtopic.php?p= они и останутся в индексе

[Siava]

jd8615, если посмотрите html-код этой страницы темы, неважно какой она имеет адрес в данный момент, то каноническая ссылка её будет иметь вид

Код: Выделить всё

<link rel="canonical" href="https://www.phpbbguru.net/community/viewtopic.php?t=50172&amp;start=330">

Поэтому закрывать от индексации страницы viewtopic.php?t=XXX как минимум неразумно

[jd8615]

Поэтому закрывать от индексации страницы viewtopic.php?t=XXX как минимум неразумно

Переслал своему SEO специалисту. Тогда выходит надо p закрывать, а t оставить. Будем разбираться с ТП яндекса

Отправлено спустя 31 секунду:
Либо надо rel="canonical" менять

[Татьяна5]

Либо надо rel="canonical" менять

Чтобы на одну страницу указывало по 10 канонических ссылок?

[Perfecthus]

Siava, Кстати, такой вариант помог

Код: Выделить всё

Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid&view /viewtopic.php

Яшка, перестал ругаться на get-параметры. По-индексации, тоже всё хорошо.

[bigcrown]

У меня форум phpbb 3.x. Уже месяц постоянно приходят тексты от Яндекса такого содержания:

Здравствуйте!
При последнем обходе изменился код у важных страниц:
https://
Старый код страницы: 200
Новый код страницы: URL запрещён к индексированию тегом noindex
Код страницы помогает понять, доступны ли ваши страницы сайта для индексирования. Статус 200 означает, что сайт доступен для поискового робота. Когда ответ сервера отличается от HTTP-статуса с кодом 200 OK, страница не может участвовать в результатах поиска.

Файл robots.txt стандартный после установки создался. Сравнивал с эталоном в начале темы, совпадает.

Сам форум никто не трогает и не редактирует, а страницы одна за одной пропадают из поиска из-за тега noindex. Что это и как вернуть всё назад?

[er107]

Может быть расширение какое так влияет?

[Татьяна5]

тегом noindex

Искать откуда в коде страницы взялся тег noindex
robots.txt тут не при чём

[bigcrown]

Искать откуда в коде страницы взялся тег noindex
robots.txt тут не при чём

Я открыл страницу форума по ссылке Яндекса в режиме просмотра кода и не нашёл там слова "noindex".
Я являюсь единственным администратором форума и давно не провожу никаких установок расширений и правок кода,
а новые страницы с noindex постоянно появляются. Как?

[er107]

А можете привести пример такой страницы (или фрагмент), где написан noindex?