Поисковая оптимизация форума

[Айдар]

Booker, почитайте по этому поводу профессиональные форумы. То, о чем Вы пишете (касательно ботов) - это граббинг, и Вы в частности словите бан от ПСов тут же.
Впрочем, будет противоположное тому, о чем эта тема.

[Shredder]

Создать частичную карту сайта (исключив оттуда флуд-форумы) - это не грех, надеюсь?

[Heldar]

А смысл? ПСы их всё равно найдут и проиндексируют если они в открытом и не закрыты в роботсах.
Надо или дополнительно запрещать индексацию в роботс, или включать в карту сайта выставив минимальные приоритеты для индексирования.

И не забывайте, что карты сайта являются рекомендациями к ПС, но следовать или нет этим рекомендациям каждая ПС решает сама. Единственный способ "командовать" пауками - роботс.тхт

[Айдар]

Единственный способ "командовать" пауками - роботс.тхт

И то в последнее время практика показывает, что некоторые из них чихали на него. Восстание машин грядет, видимо!..

[Shredder]

Heldar
Смысл в облегчении карты и самого процесса хотя бы, у меня в 2 раза легче стала.

[Booker]

Хорошо, я так понимаю, что наилучший вариант - таки рерайтинг, ибо закрыть ботам новостной раздел похоже будет клоакингом. Если прописать в роботсе запрет индексации такого раздела тоже похоже не выход, ибо некоторые его обходят. Верно я понимаю?
Сорри, если глуповатые вопросы, но ещё нюансы:
1) имеет ли смысл переделывать старые посты с таким перепостингом (скорее всего они уже проиндексированы) или уже нет?
2) каким образом не только не попадают в бан и не выпадают из поиска, но и занимают его первые строчки сайты с тупым набором ссылок на новости? (идёт название новости, потом несколько ссылок на разные сайты с этой новостью, тексты абсолютно одинаковые)
3) бан в ПС - означает только понижение сайта или бот ПС тоже перестаёт ходить?

[Shredder]

1) имеет ли смысл переделывать старые посты с таким перепостингом (скорее всего они уже проиндексированы) или уже нет?

Имеет. Когда бот проиндексирует заново (они постоянно это делают), то взамен штрафному у вас будет уникальный контент.

[Heldar]

Понижение сайта в поиске это "санкция". Бан означает полное исключение сайта из результатов поиска. Теоретически боты продолжают ходить и когда нибудь после миллиона исправлений сайт может быть выведен из под бана. На практике это единичные случаи которые скорее подтверждают правило о необратимости бана.

[Айдар]

закрыть ботам новостной раздел похоже будет клоакингом

Фигасе заява! И сами же пишете:

прописать в роботсе запрет индексации такого раздела тоже похоже не выход

Лучше всего присвоить метатег

Код: Выделить всё

<meta name="robots" content="noindex">

таким страницам.

имеет ли смысл переделывать старые посты с таким перепостингом

По факту бана имеет, но только после излитых Платону слез.

каким образом не только не попадают в бан

Сео - сложная наука, здесь много факторов. Но чаще всего у таких сайтов все хорошее заканчивается после ручной модерации. Хотя, тоже не факт.

Теоретически боты продолжают ходить и когда нибудь после миллиона исправлений сайт может быть выведен из под бана.

Это смотря сколько неуникального контента есть и как он исправляется. Вообще, редко банят весь сайт, чаще - раздел с неуникальным контентом.

[Booker]

Хорошо, я понял, спасибо всем.

[sweetah]

Есть моды topic seo description and keywords mod 1.0.6 и viewpost 0.1.0. Первый позволяет задавать ключевые слова как ко всей теме, так и к определенному сообщению. То есть в связке эти моды дают более точный подбор ключевых слов (meta name="keywords") при просмотре отдельного сообщения (viewpost.php).

Вопрос: стоит ли открывать ботам просмотр viewpost с целью более точной идентификации содержимого по ключевым словам? Вопрос задаю потому, что есть один минус - контент будет дублироваться: один раз в теме (viewtopic), второй раз - в просмотре отдельного сообщения (viewpost).

[Айдар]

Не стòит или canonical.

[comshat]

народ, вы не хотите понимать суть вопроса.. да, робот НЕ может перейти на страницу профиля, т.к. тот закрыт. но, поскльку ссылки на профили есть на главной, а на главную страницу робот может зайти и ссылки (ссылки! а не сами профили) на профили видит, а значит - передает им "вес" (тот же гугловский pagerank). если закрыть ссылки на профили форумчан в nofollow - робот их тоже будет видеть, но вот вес передавать не будет.
меня по-прежнему не устраивает ситуация, что кнопка (а по логике своей - ссылка) увеличения шрифта имеет PR 2, а некоторые пользовательские профили PR 1. зачем передевать этим страницам вес, если в поиске они все равно учавствовать не будут, т.к. закрыты от роботов?
поэтому все еще прошу совета - как закрыть ссылки с главной страницы форума в nofollow? заранее благодарю... сам найти в шаблонах не смог.
для тех, кто не въехал в суть вопроса касаемо видимости профиля и передачи веса ссылки просьба не хамить.

[MAzZY]

nofollow - робот их тоже будет видеть, но вот вес передавать не будет.

nofollow забирает вес от донора, но не передаёт акцептору.
Лучше прятать эти ссылки от бота по условию в шаблоне

[comshat]

nofollow забирает вес от донора, но не передаёт акцептору.

не забирает, в том-то и дело.. с алгоритмами PR я не на "ты", но вот:
http://digits.ru/articles/promotion/pagerank.html

т.о., если ссылки на профили будут в nofollow - вес на остальные, нужные страницы (подразделы форума и т.д.) будет переткать в большем объеме, а "ненужные" для поиска профили не будут приобреть вес, который им ну на фиг не упал...