Как закрыть ссылки от индексации?

[sk16rus]

Вот теперь практически все понятно!
Только с модами напряженка - пробовал поставить один, но знаний не хватило :(
Огромное спасибо за помощь!

[sk16rus]

Закрыл от индексации ссылки, как мне посоветовал Палыч (и forall).
Внес исправления в файлы bbcode.tpl и bbcode.php и загрузил в корень сайта robots.txt с рекомендованным кодом.

Результаты проверял двумя способами - по программке оценки стоимости ссылок (там указывается количество внешних и внутренних ссылок на странице) и просмотром html-кода страницы.

Сразу после внесения вышеуказанных изменений перестали индексироваться ссылки в тексте сообщений.
А вот ссылки в профиле продолжают индексироваться.
В чем может быть дело?

Заранее спасибо за помощь.
С уважением

[Палыч]

В чем может быть дело?

файл robots.txt не мгновенно отрабатывается поисковиками.
+ убедиться, что он валидный (Unix кодировка, правильный синтаксис, залит в корень)

[sk16rus]

А как сделать Unix кодировку?
При попытке "Сохранить как" (из блокнота) выдает кодировку только: Юникод, Юникод Big Endian, UTF и ANSI...
А если я правлю в Total Commander'е, то есть предложение сохранить в КOI8-R.
Так наверно правильнее будет?
Спасибо.

[Палыч]

sk16rus
Блокнот не пойдёт. В FAR по shift-F2

[sk16rus]

Здравствуйте!
Пробую закрыть ссылки на форуме, у меня осталась проблема с закрытием ссылок в профиле пользователей.
Я загрузил в корень сайта файл robots.txt:

Код: Выделить всё

User-agent: *
Disallow: /forum/groupcp.php
Disallow: /forum/index.php?c=
Disallow: /forum/login.php
Disallow: /forum/memberlist.php
Disallow: /forum/posting.php
Disallow: /forum/privmsg.php
Disallow: /forum/profile.php
Disallow: /forum/search.php
Disallow: /forum/viewonline.php

Проверяю работу файла в Яндексе (Вебмастер, анализ robots.txt)
При проверке (к примеру) профиля пользователя http://sk16.ru/forum/viewtopic.php?p=198#198 Яндекс пишет, что URL не пренадлежит моему сайту, а при проверке того же адреса, но с www - http://www.sk16.ru/forum/viewtopic.php?p=198#198 результат проверки - "разрешен" . При этом внешние ссылки на этой страничке продолжают индексироваться.
Подскажите пожалуйста:
- что значит в результате проверки "разрешен" ?
- что мне предпринять, чтобы ссылки все-таки не индексировались?
- или необходимо еще подождать?

Заранее Большое спасибо.
С уважением


С данным вопросом разобрался. Всем большое спасибо за помощь.

[sk16rus]

Господа, интересный момент.
Робот Яндекса прочитал файл robots.txt и принял его к сведению.
Я захожу на свой форум (где с помощью robots.txt запрещена индексация внешних ссылок в профиле пользователя), перехожу на страничку списка пользователей, где указаны их сайты (http://sk16.ru/forum/memberlist.php) и проверяю наличие внешних ссылок (перед этим упорядочив список по наличию у пользователей сайтов).
В результате вижу, что от индексации закрыты все ссылки кроме одной (!) которая ведет на сайт http://www.aviachamp.com

Проверял с помощью этих страничек: linum.mohito.ru и vface.controlstyle.ru

В чем может быть дело? Почему одна ссылка продолжает индексироваться?
(Пробовал в админке убрать сайт этого пользователя - проверка показывает 0 внешних ссылок)

Спасибо
С уважением