robots.txt для 3.x

[Siava]

Disallow: /index.php?

Disallow: /viewtopic.php?t=*

Оно вам зачем? Первое запрещает индексацию списка форумов внутри категории (ну или всего списка форумов), а второе - запрещает индексацию тем форума.

Отправлено спустя 4 минуты :

Disallow: /viewtopic.php*p=*

Тут после php точно * ? Иначе опять же, все темы.

[vic4884]

Это зачем запрещать?

сложный вопрос для меня

Тут после php точно * ? Иначе опять же, все темы.

а что туда надо вписать?

[LONER]

vic4884, А чем не подходит robots.txt для 3.1 ?

[vic4884]

vic4884, А чем не подходит robots.txt для 3.1 ?

там тоже есть Disallow: /forum/viewtopic.php?p=*
а товарищ выше написал что это не хорошо- как я понял, значит тоже не корректный.
или я ошибаюсь у меня ж вроде все тоже самое кроме Disallow: /forum/*?sid=*

[LONER]

vic4884, Он там про звездочку спросил, а там ее как раз нет.

[vic4884]

vic4884, Он там про звездочку спросил, а там ее как раз нет.

как нету?
вот моя строчка
Disallow: /viewtopic.php*p=*
вот строчка из примера
Disallow: /forum/viewtopic.php?p=*
а, тьфу, капец не внимательный, вижу о чем вы

[LONER]

vic4884, Разницу видно? В твоей 2 звезды, а там одна в конце, а там где у тебя первая звезда, знак вопроса стоит.

[vic4884]

vic4884, Разницу видно? В твоей 2 звезды, а там одна в конце, а там где у тебя первая звезда, знак вопроса стоит.

да,да прошу прощенья, пересидел видать за монитором уже
лучше значит тот из примера взять за образец себе?

[LONER]

лучше значит тот из примера взять за образец себе?

Дело хозяйское. Каждый под себя и для своих нужд делает.
http://www.phpbbguru.net/robots.txt

[vic4884]

Дело хозяйское. Каждый под себя и для своих нужд делает.
http://www.phpbbguru.net/robots.txt

так мало строчек, в примере там больше было, почему так?

[LONER]

почему так?

Каждый под себя и для своих нужд делает.

Можно вообще без robots.txt

Вот тебе к примеру для чего robots.txt ?

[vic4884]

Вот тебе к примеру для чего robots.txt ?

для лучшей индексации поисковиками

[LONER]

для лучшей индексации поисковиками

Можно вообще без robots.txt

Самое лучшее для индексации.

Если конкретно не знаешь для чего, то ставь robots.txt для 3.1 и пока не морочь себе голову, когда понадобится что-то разрешать или запрещать ботам, тогда можно будет вернуться к этому вопросу тут же.

[vic4884]

Если конкретно не знаешь для чего, то ставь robots.txt для 3.1 и пока не морочь себе голову, когда понадобится что-то разрешать или запрещать ботам, тогда можно будет вернуться к этому вопросу тут же.

если честно я не очень понимаю зачем запрещать или разрешать что-то ботам? Они заходят, смотрят и все, а суть этого файла в глубоком смысле мне не ясна.

[LONER]

не очень понимаю зачем запрещать

Запрещают например админку, чтобы боты не индексировали, кто-то запрещает индексировать профили пользователей, кто-то приватные, скрытые темы, сообщения. Да много разных вариантов, поэтому я и писал выше, что каждый делает под себя и свои нужды.