robots.txt для 3.x

[Rubinovi4]

и у меня очень много ломится тем с sid

Решать надо в конфиге куков, в админке.

[sasa85]

А что там решать?

[Rubinovi4]

А что там решать?

На форуме уже давали ответ на данный вопрос, правильно прописать куки, в целом поиск даст ответ.

Даже поискал для Вас или за Вас..)) Re: Проблема Cookie (Пост Sector_G #473016)

[sasa85]

Спасибо, а то я бы не понял, что искать.
Из темы понял, что надо проверит что стоит http протокол, а не https. У меня http
Безопасные cookie [ https ]: Отключено

[Rubinovi4]

Из темы понял, что надо проверит что стоит http протокол, а не https. У меня http
Безопасные cookie [ https ]: Отключено

И домен правильн опрописать и куки. И sid должен исчезнуть после входа на следующем переходе.

[KEMnEP]

sasa85, проще добавить агенты поисковиков в раздел ботов, чтоб они заходили сразу залогинившиеся но как боты (штатный функционал движка) тогда никаких сидов в индексе не будет.

[sasa85]

Rubinovi4
Домен прописан с точкой, типа .имя домена.ru
Название куков, произвольное

Отправлено спустя 3 минуты 40 секунд:
А про resent topic я написал Disallow, так его запретить?
Disallow: /forum/*&recent_topics_start=*

[Rubinovi4]

Домен прописан с точкой, типа .имя домена.ru

Разве? Я не могу точно сказать, у меня обычный, без точек и всего остального, sid не таскается, то есть работает как и должен.

[Anvar]

Домен второго уровня должен начинаться с точки, для куков только. По ссылке выше как раз таки написано.

[KEMnEP]

Вобще то phpbb по крайней мере 3.1 сам точку проставляет в самом куке в начале домена. Даже если в админки без точки

[Rubinovi4]

Вобще то phpbb по крайней мере 3.1 сам точку проставляет в самом куке в начале домена. Даже если в админки без точки

Скорее всего так и есть. Ибо в админке прописано без точки. sid сбрасывается при первом же переходе. Куки все работают без ошибок.))

[sasa85]

Пользовался роботс тхт как на первом сообщении. Заметил что в индекс залетают не нужные страницы вида:
домен/forum/viewtopic.php?f=2&t=77&start=15&view=print
Подскажите как его запретить в роботс тхт и нужно ли?

[владимир1983]

На странице печати есть мета-тег

Код: Выделить всё

<meta name="robots" content="noindex" />

поэтому такие страницы в индекс попадать не должны.

[sasa85]

владимир1983, действительно.
В индекс поиска Яндекса не попадают, а если на сайте есть поиск по сайту от ЯНдекса, то все страницы забиты этими печатными страницами. В общем получается, что поиск корявый, кидает на печатный вид. Вот думал как победить это.

Отправлено спустя 4 минуты 18 секунд:
В настройках поиска по сайту в ЯНдексе сделал Стандартный поиск вместо Saas и стало нормуль.

[vic4884]

Знатоки, подскажите пожалуйста опытным глазом все ли верно или что убрать или что добавить

Скрытый текст

User-agent: *
Disallow: /adm/
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /index.php?
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewonline.php
Disallow: /*&st=*
Disallow: /*&sk=*
Disallow: /*&sd=*
Disallow: /*&hilit=*
Disallow: /*&view=*
Disallow: /viewtopic.php*p=*
Disallow: /viewtopic.php?t=*
Disallow: /view*&start=0$

# Google Image
User-agent: Googlebot-Image
Disallow:

# Google AdSense
User-agent: Mediapartners-Google
Disallow:

User-agent: Yandex
Disallow: /adm/
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /index.php?
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewonline.php
Disallow: /*&st=*
Disallow: /*&sk=*
Disallow: /*&sd=*
Disallow: /*&hilit=*
Disallow: /*&view=*
Disallow: /viewtopic.php*p=*
Disallow: /viewtopic.php?t=*
Disallow: /view*&start=0$

Host: forum.ххх.ru
Sitemap: https://forum.xxx.ru/sitemap.xml

Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php

спасибо заранее