Индексация поисковиками

[Siava]

1) Сделать нужные права для одного форума

Самое смешное, что у меня изначально такие права для всех видимых форумов установлены (для гостей соответственно тоже гостевые на чтение), а в кеше поисковиков хрен.

Отправлено спустя 4 минуты 41 секунду:
Гуглботом зашёл, тоже не видно. Это уже что-то, попробую разобраться.

Отправлено спустя 17 минут 37 секунд:
Итак, решил отображение простым до безобразием действием. Отключил гуглбота на странице поисковых ботов, посмотрел страницу с вложениями, убедился, что они видны и включил бота обратно. Стало всё видно.
Сделаю это для всех работающих поисковиков и через пару недель отпишусь.
А нифига.. это был самообман. На гостя переключился(

Отправлено спустя 11 минут 52 секунды:
Мне кажется это какая-то бага в релизе. На phpbb.com тоже, вот пример: https://www.phpbb.com/community/viewtop ... 5#p6899665
Под ботом скрыто. Хотя может у них такие права выставлены..

Я прогнал форум с отключенными расширениями на стандартном стиле. Права для ботов есть, но доступа к вложениям нет.

Отправлено спустя 4 минуты 43 секунды:
И снова поспешный вывод.
Теперь вложения видно и гуглботом.

Права групп > Боты:

Было всё запрещено.

[rxu]

Т.е. в глобальных правах? Хм.

[Siava]

Вложения в кеше гугла стали появляться

[romaamor]

Т.е. в глобальных правах?

Так не когда не мешало...

[sasa85]

Индексация картинок пошла, но вот только индексировать он стал из потока feed.php
Например на Я.Картинках, нахожу свою картинку и жму на нее, а он перекидывает не на страницу, а на поток rss feed.php
Кто знает как сделать по человечески?

[Gubkin]

Почему у меня гугл выдает зеркало как основной сайт ?
вот пример https://www.google.com/search?q=оилчойс
и это зеркало oilchoice.nichost.ru повсюду напрягает

1) файл robots.txt составлен вроде правильно http://www.oilchoice.ru/robots.txt
2) Гугл вебмастер пару недель назад посещал, указывал основной сайт и зеркала

[Siava]

Gubkin, запретите индексировать зеркало.

[Kuskow]

Подскажите, в сегодняшнем апдейте выдачи яндекса в индекс попало кучу страниц вида:
/index.php?d1e5c91e12345d9a60
/index.php?8f0b206280fe3498a0
/index.php?41972785d94d65f055

как убрать это чудо?

Я у себя в robots.txt сделал так:

Код: Выделить всё

Disallow: /index.php?

Кто может объяснить мне, от куда в индексе оказались такие страницы:
mysite/?dgcr=1
mysite/?fb_xd_fragment
mysite/?s=Register
mysite/?tp=1
Откуда поисковики вообще такие ссылки нашли?

О. у меня тоже такое было. Оказалось, что в одном из добавленных своих bbcode используется iframe. И вот в нём страница с относительными ссылками подобного формата. Пришлось вообще отказаться от этого своего bbcode на время, пока не придумаю, как сделать, чтобы пользователи туда не всё подряд могли вставить, а только страницы определённых сайтов.
Посмотрите в Яндекс.Вебмастер (Ссылки -> Внутренние ссылки), какие страницы Вашего форума ссылаются на этих несуществующих, и увидите, какой именно bbcode так пакостит.

[southklad]

Сейчас зашел в картинки яндекса и увидел, что в нем нет ни одной картинки с форума, как быть?

[Siava]

igorbond, как минимум воспользоваться поиском, здесь это уже обсуждалось.

[misterleks]

Правильно я понимаю, что Яндекс не забирает картинки открываемые скриптами? Что можно сделать? Не хочется отказываться от скрипта.

[southklad]

igorbond, как минимум воспользоваться поиском, здесь это уже обсуждалось.

Как раз поиск и привел сюда.

Яндекс не забирает картинки открываемые скриптами? Что можно сделать? Не хочется отказываться от скрипта.

У меня на Вордпресе сайт, там точно так же открывает и норм индексация.

[misterleks]

igorbond, у меня на вордпресс для картинок отдельная карта формируется и тоже нормально все.

[G20]

Доброго времени суток!
Пытаюсь получить индексирование конференции, для начала хотябы у Yandex и что-то заблудился в трёх соснах.
Первая же ссылка обозначенная им как не проиндексированная и как ошибка это
/viewforum.php?f=1. 404
Как я понимаю это ссылка на самый первый форум, создаваемый при инсталяции конференции "Это Ваш первый форум..."
Причем пройти по этой ссылке не получится. Результатом будет "Запрошенного форума не существует."
Понимаю, это не правильно но выкрутился тем, что в robots.txt запретил индексирование Disallow: /viewforum.php?f=1

Вопрос, откуда робот Yandex берет данные о наличие такого форума, если его нет в том числе и на карте сайта?
Карта сайта генерится с помощью расширения от shredder.

Второй вопрос, робот Yandex помечает как ошибка 404 непонятный список адресов. Скрин прилагаю.
Само собой на карте сайта этих ссылок тоже нет. Откуда робот это берёт для индексирования и как закрыть их для обхода ?

[Siava]

Второй вопрос, робот Yandex помечает как ошибка 404 непонятный список адресов

Ответ тут.

запретил индексирование Disallow: /viewforum.php?f=1

Нет смысла запрещать индексации всего, что у вас на форуме будет удаляться. Со временем яндекс потеряет интерес к таким ссылкам, если конечно они не будут присутсвовать в контенте.

P.S.
Ваши вопросы немного не по теме, если что.