Индексирование несуществующих страниц в почищенных или разделённых темах

[Kuskow]

А вообще давно пора для закрытых форумов гостям и несуществующих форумов отдавать 404

404 сделать я пока не пытался, но вот решая другой вопрос Re: [3.1][3.2][release] SEO Meta Description заодно решился и этот. Суть в том, чтобы ставить noindex на страницах, в которых не выводятся ни сообщения (в топиках), ни список тем (в форумах):

Усовершенствовал конструкцию. Теперь в файле /styles/prosilver/template/overall_header.html у меня написано вот так:

Код: Выделить всё

<!-- IF S_VIEWTOPIC or S_VIEWFORUM -->
	<meta name="description" content="{FORUM_DESC}, {TOPIC_TITLE}" />
<!-- ELSEIF S_INDEX -->
	<meta name="description" content="Название и развёрнутое описание сайта" />
<!-- ELSE -->
	<meta name="robots" content="none" />
<!-- ENDIF -->

И чтобы это вступило в силу, после изменений файла надо в админке "Очистить кэш".

Таким образом, в индексы поисковиков попадают те же страницы, что и в Sitemap, а именно: index, viewforum, viewtopic. Остальным в результатах поиска делать нечего - правильно?

Так что, теперь при обходе страницы бот получает <meta name="robots" content="none" />, поскольку эта страница, хоть она и /viewtopic.php?t=1234, но "Для просмотра этого форума вы должны быть авторизованы". И вот теперь боты воспринимают тему из закрытого раздела так:

URL запрещён к индексированию тегом noindex

Сканирование разрешено? - Да
Получение страницы - Не удалось. Ошибка 404

В общем-то, все эти страницы и раньше не попадали в индекс поисковиков, но исключались оттуда по причине "Дубль" или "Недостаточно качественная", а теперь они будут отфильтрованы по критерию NOINDEX.

Duplet.png

[Balamut]

404 сделать я пока не пытался

На самом деле, сейчас (со времён тройки) это сделать не так уж и сложно - достаточно сделать стиль, основанный на основном, и сделать в хеадере проверку на логин и если его нет - редиректить на 404. И на все закрытые форумы ставить этот стиль.
(не пробовал, только что в голову пришло).