Уважаемые пользователи!
C 7 ноября 2020 года phpBB Group прекратила выпуск обновлений и завершила дальнейшее развитие phpBB версии 3.2.
С 1 августа 2024 года phpBB Group прекращает поддержку phpBB 3.2 на официальном сайте.
Сайт официальной русской поддержки phpBB Guru продолжит поддержку phpBB 3.2 до 31 декабря 2024 года.
С учетом этого, настоятельно рекомендуется обновить конференции до версии 3.3.
C 7 ноября 2020 года phpBB Group прекратила выпуск обновлений и завершила дальнейшее развитие phpBB версии 3.2.
С 1 августа 2024 года phpBB Group прекращает поддержку phpBB 3.2 на официальном сайте.
Сайт официальной русской поддержки phpBB Guru продолжит поддержку phpBB 3.2 до 31 декабря 2024 года.
С учетом этого, настоятельно рекомендуется обновить конференции до версии 3.3.
robots.txt и sitemap.xml для phpBB3
Правила форума
Местная Конституция | Шаблон запроса | Документация (phpBB3) | Переход на 3.0.6 и выше | FAQ-3 (phpbb3) | Как задавать вопросы | Как устанавливать моды
Ваш вопрос может быть удален без объяснения причин, если на него есть ответы по приведённым ссылкам (а вы рискуете получить предупреждение ).
Местная Конституция | Шаблон запроса | Документация (phpBB3) | Переход на 3.0.6 и выше | FAQ-3 (phpbb3) | Как задавать вопросы | Как устанавливать моды
Ваш вопрос может быть удален без объяснения причин, если на него есть ответы по приведённым ссылкам (а вы рискуете получить предупреждение ).
- pisikot
- phpBB 1.2.1
- Сообщения: 21
- Стаж: 13 лет 5 месяцев
- Откуда: tmn
- Благодарил (а): 32 раза
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
phpBB 3.0.8 стоит SiteMap Generator Версия1.1.0
После создания карты даты не понятные
дата на форуме у темы: 03.01.2011, 14:22 а в карте: MonPMMSKE_013C
В настройках форума пробовал изменить формат даты, но результат тот же...
Пробовал еще вариант, phpBB 3.0.8 чистую поставил без единого мода на нее вешал SiteMap Generator Версия1.2.0 и тоже самое(
Может это с хостингом что-то? На денвере нормально получается сделать...
Помогите!))
После создания карты даты не понятные
дата на форуме у темы: 03.01.2011, 14:22 а в карте: MonPMMSKE_013C
В настройках форума пробовал изменить формат даты, но результат тот же...
Пробовал еще вариант, phpBB 3.0.8 чистую поставил без единого мода на нее вешал SiteMap Generator Версия1.2.0 и тоже самое(
Может это с хостингом что-то? На денвере нормально получается сделать...
Помогите!))
Re: robots.txt и sitemap.xml для phpBB3
Прокомментируйте,плз,мой файл robots.txt и почему при проверке этого файла инструментом Яндекса выдает ошибку Некорректный формат URL файла Sitemap ? Спасибо.
Код: Выделить всё
User-agent: *
Disallow: /adm
Disallow: /cache
Disallow: /css
Disallow: /docs
Disallow: /download
Disallow: /files
\\Disallow: /gallery
Disallow: /images
Disallow: /language
Disallow: /statistics
Disallow: /styles
Disallow: /temp
Disallow: /test
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /statistics.php
Disallow: /viewonline.php
Disallow: /memberlist.php
Disallow: /faq.php
Disallow: /download.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewforum.php?f=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Sitemap: /sitemaps/sitemap_index.xml
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php
User-agent: Yandex
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewforum.php?f=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Sitemap: /sitemaps/sitemap_index.xml
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php
User-agent: MSN
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewforum.php?f=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Sitemap: /sitemaps/sitemap_index.xml
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php
User-agent: Yahoo
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewforum.php?f=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Sitemap: /sitemaps/sitemap_index.xml
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php
User-agent: Google
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewforum.php?f=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Sitemap: /sitemaps/sitemap_forums.xml
Sitemap: /sitemaps/sitemap_index.xml
Sitemap: /sitemaps/sitemap_topics_0000000-0050000.xml
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php
- Айдар
- Former team member
- Сообщения: 1687
- Стаж: 13 лет 3 месяца
- Откуда: KZN
- Благодарил (а): 93 раза
- Поблагодарили: 189 раз
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
Дед,
Их то зачем запретили? Особенно /css ?
Код: Выделить всё
/css
/files
/images
/styles
/language
In Web We Trust
Re: robots.txt и sitemap.xml для phpBB3
Могу согласиться, что styles и language не стоит запрещать, но в остальных то что сканер может найти?
- Айдар
- Former team member
- Сообщения: 1687
- Стаж: 13 лет 3 месяца
- Откуда: KZN
- Благодарил (а): 93 раза
- Поблагодарили: 189 раз
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
Собственно то, что в названиях папок написано, то и может найти. Наприме, у меня с картинок неплохо переходят, хотя и нецелевые посетители.
In Web We Trust
Re: robots.txt и sitemap.xml для phpBB3
Как бы ты построил robots.txt ? Форум установлен в корень,в корне также Portal (Board3 Portal) + галерея (phpBB-Gallery) + PHPBB СТАТИСТИКА.
- Вложения
-
- root.JPG (10.32 КБ) 2449 просмотров
- Айдар
- Former team member
- Сообщения: 1687
- Стаж: 13 лет 3 месяца
- Откуда: KZN
- Благодарил (а): 93 раза
- Поблагодарили: 189 раз
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
Вот так:
away.htm и go.php - это редирект внешних ссылок. Еще memberlist добавил бы.
По указанным модам написать ничего не могу - не знаю какие там файлы есть.
Код: Выделить всё
User-agent: *
Disallow: /away.htm
Disallow: /go.php
Disallow: /groupcp.php
Disallow: /login.php
Disallow: /privmsg.php
Disallow: /profile.php
Disallow: /viewonline.php
Disallow: /faq.php
Disallow: /posting.php
Disallow: /recent_cp1251.php
Disallow: /stk/
По указанным модам написать ничего не могу - не знаю какие там файлы есть.
In Web We Trust
Re: robots.txt и sitemap.xml для phpBB3
Можно ли прокомментировать мой robots.txt? Спасибо.
- Вложения
-
- robots.txt
- (1.3 КБ) 572 скачивания
- Айдар
- Former team member
- Сообщения: 1687
- Стаж: 13 лет 3 месяца
- Откуда: KZN
- Благодарил (а): 93 раза
- Поблагодарили: 189 раз
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
Дед, достаточно неплохо - все ненужное ПСам есть, ничего лишнего в файле нет.
In Web We Trust
Re: robots.txt и sitemap.xml для phpBB3
Вчера смотрю, Yahoo [Bot] шарит по статистике, которая у меня закрыта в robots.txt. Может быть для каждого робота нужно создавать секцию с понятными для него директивами?
- Айдар
- Former team member
- Сообщения: 1687
- Стаж: 13 лет 3 месяца
- Откуда: KZN
- Благодарил (а): 93 раза
- Поблагодарили: 189 раз
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
А кто сказал, что ПСы не будут ходить по закрытым от них документам!? Вы им запрещаете индексировать их, но не ходить по ним.Дед писал(а):шарит по статистике, которая у меня закрыта в robots.txt
In Web We Trust
- kreator
- phpBB 1.4.4
- Сообщения: 135
- Стаж: 13 лет 4 месяца
- Откуда: Новочебоксарск
- Благодарил (а): 23 раза
- Поблагодарили: 8 раз
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
Подскажите пожалуйста: мне показалось? или яндекс проиндексировал файл go.php (редирект)
вот скрин: в роботс.txt прописана строка
вот скрин: в роботс.txt прописана строка
Код: Выделить всё
Disallow: /go.php
Чеченские хакеры уже третий день активно пытаются зарегистрироваться в одноклассниках (TheJokes.ru)
- Айдар
- Former team member
- Сообщения: 1687
- Стаж: 13 лет 3 месяца
- Откуда: KZN
- Благодарил (а): 93 раза
- Поблагодарили: 189 раз
- Контактная информация:
Re: robots.txt и sitemap.xml для phpBB3
Это скрин с Я-Вебмастера "Загруженные страницы".rxu писал(а):Что это за скрин?
kreator, заметь, "Загруженные страницы", а не "Страницы в поиске" - это во-первых. Во-вторых, в любом случае, его в Вебмастере быть не должно, и я не понимаю, почему он есть и, вообще, какого фига у тебя там 289 страниц и в поддиректории файлы на .asp ?
In Web We Trust
Re: robots.txt и sitemap.xml для phpBB3
такой вопрос: гугл выдает в инструментах для веб-мастеров ключевые слова по типу "июль, добавлено, заголовок, зарегистрирован" и так далее. Даже ники показывает как ключевые. Можно ли это как-то исправить в файле робот.тхт?