Проблема доступа Google Bot

Юлия · Сообщение **Юлия** » 08.03.2015 16:58

Добрый день коллеги, не так давно обнаружила проблему с доступом Google бота, не сканирует сайт уже больше года, в инструментах для веб-мастера сайт всё время не доступен, постоянные ошибки сервера при обращении бота к сайту. Написав в техподдержку хостинга, они мне прислали вот что:

Мы обнаружили множественные обращения Googlebot, завершающиеся ошибкой 500, при которой возникает следующая ошибка PHP

www.oranda-gold.ru [Fri Mar 06 03:09:06 2015] [error] [client 66.249.78.162] PHP Fatal error: SQL ERROR [ mysql4 ]<br /><br />Column 'username' cannot be null [1048]<br /><br />\xd0\x9f\xd1\x80\xd0\xbe\xd0\xb8\xd0\xb7\xd0\xbe\xd1\x88\xd0\xbb\xd0\xb0 \xd0\xbe\xd1\x88\xd0\xb8\xd0\xb1\xd0\xba\xd0\xb0 SQL \xd0\xbf\xd1\x80\xd0\xb8 \xd0\xb2\xd1\x8b\xd0\xb1\xd0\xbe\xd1\x80\xd0\xba\xd0\xb5 \xd0\xbd\xd0\xb0 \xd1\x8d\xd1\x82\xd0\xbe\xd0\xb9 \xd1\x81\xd1\x82\xd1\x80\xd0\xb0\xd0\xbd\xd0\xb8\xd1\x86\xd0\xb5. \xd0\x9f\xd0\xbe\xd0\xb6\xd0\xb0\xd0\xbb\xd1\x83\xd0\xb9\xd1\x81\xd1\x82\xd0\xb0, \xd1\x81\xd0\xbe\xd0\xbe\xd0\xb1\xd1\x89\xd0\xb8\xd1\x82\xd0\xb5 <a href="mailto:admin@oranda-gold.ru">\xd0\xb0\xd0\xb4\xd0\xbc\xd0\xb8\xd0\xbd\xd0\xb8\xd1\x81\xd1\x82\xd1\x80\xd0\xb0\xd1\x82\xd0\xbe\xd1\x80\xd1\x83</a>, \xd0\xb5\xd1\x81\xd0\xbb\xd0\xb8 \xd0\xbe\xd1\x88\xd0\xb8\xd0\xb1\xd0\xba\xd0\xb0 \xd0\xb1\xd1\x83\xd0\xb4\xd0\xb5\xd1\x82 \xd0\xbf\xd0\xbe\xd0\xb2\xd1\x82\xd0\xbe\xd1\x80\xd1\x8f\xd1\x82\xd1\x8c\xd1\x81\xd1\x8f. in /home/o/orandagoru/public_html/includes/db/dbal.php on line 757

По всей видимости сайт пытается вставить запись в таблицу, не указывает значение поля, которое обязано быть не пустым.

Что это может значить? и как это исправить? Очень буду благодарна за любую помощь :)

Сообщение **rxu** » 08.03.2015 17:18

Зашел под ботом, ошибки не увидел, но выглядит вот так.

googlebot.jpg

Юлия · Сообщение **Юлия** » 08.03.2015 17:24

ещё круче :) вообще всё пусто, как такое может быть? легче не стало :( куда же копать то?

Сообщение **rxu** » 08.03.2015 17:32

Копайте в сторону форумных прав доступа, наверное.

Юлия · Сообщение **Юлия** » 08.03.2015 17:40

это скорее всего где то именно ошибка, т.к после очередного обновления года 2 назад, может быть меньше, перестали отображаться дни рождения не зарегиным пользователям и как не крутили настройки прав доступа, не помогло и вообще никто не смог ответить почему так и куда двигаться...

zAN0VZ8H65wam9.jpg

Пчелкин · Сообщение **Пчелкин** » 08.03.2015 22:40

Про дни рождения в админке аж в четырех местах. Видела?

Юлия писал(а):это скорее всего где то именно ошибка,

Нет. Вам написали -

rxu писал(а):Копайте в сторону форумных прав доступа

Настраивайте...

nonarko · Сообщение **nonarko** » 28.03.2015 11:32

У меня возникла такая же проблема. Причём доступ невозможен для всех иностранных поисковых ботов, не только для googlebot'а. При этом Яндексбот всё хорошо видит, имеет доступ и индексирует.
В административных настройках, для всех ботов всё выставлено одинаково.
Гуглботу сайт отдаёт вот такой вот код:

Код: Выделить всё

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"><html xmlns="http://www.w3.org/1999/xhtml" dir="ltr"><head><meta http-equiv="content-type" content="text/html; charset=utf-8" /><title>Общая ошибка</title><style type="text/css">
/* <![CDATA[ */
* { margin: 0; padding: 0; } html { font-size: 100%; height: 100%; margin-bottom: 1px; background-color: #E4EDF0; } body { font-family: "Lucida Grande", Verdana, Helvetica, Arial, sans-serif; color: #536482; background: #E4EDF0; font-size: 62.5%; margin: 0; } a:link, a:active, a:visited { color: #006699; text-decoration: none; } a:hover { color: #DD6900; text-decoration: underline; } #wrap { padding: 0 20px 15px 20px; min-width: 615px; } #page-header { text-align: right; height: 40px; } #page-footer { clear: both; font-size: 1em; text-align: center; } .panel { margin: 4px 0; background-color: #FFFFFF; border: solid 1px  #A9B8C2; } #errorpage #page-header a { font-weight: bold; line-height: 6em; } #errorpage #content { padding: 10px; } #errorpage #content h1 { line-height: 1.2em; margin-bottom: 0; color: #DF075C; } #errorpage #content div { margin-top: 20px; margin-bottom: 5px; border-bottom: 1px solid #CCCCCC; padding-bottom: 5px; color: #333333; font: bold 1.2em "Lucida Grande", Arial, Helvetica, sans-serif; text-decoration: none; line-height: 120%; text-align: left; } 
/* ]]> */
</style></head><body id="errorpage"><div id="wrap">	<div id="page-header">		<a href="./">Вернуться на главную страницу</a>	</div>	<div id="acp">	<div class="panel">		<div id="content">			<h1>Общая ошибка</h1>			<div>SQL ERROR [ mysqli ]<br /><br />You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'AND t.template_id = s.template_id
				AND c.theme_id = s.theme_id
				AND i.imag' at line 4 [1064]<br /><br />Произошла ошибка SQL при выборке на этой странице. Пожалуйста, сообщите <a href="mailto:admin@nonarko.ru">администратору</a>, если ошибка будет повторяться.</div><p>Уведомите администратора конференции или вебмастера: <a href="mailto:admin@nonarko.ru">admin@nonarko.ru</a></p>		</div>	</div>	</div>	<div id="page-footer">		Powered by <a href="https://www.phpbb.com/">phpBB</a>&reg; Forum Software &copy; phpBB Group	</div></div></body></html>

Не подскажете в какую хотя бы сторону копать, что бы убрать эту ошибку?

Сообщение **rxu** » 29.03.2015 4:30

nonarko, Проверьте, осталось ли свободное место в дисковом пространстве, выделенном под ваш вебсервер, а также права доступа к папке /cache.

xuroo · Сообщение **xuroo** » 27.04.2015 18:45

Господа, серьезные затруднения на этот счет. Решена ли проблема?
Копаю в сторону прав группы боты уже 3 дня. Там копать то нечего.

Получается: боты установлены. Права установлены все сразу для теста (как для бота, только для чтения и пр). Проверка прав googlebot заканчивается тем, что вижу форум.
Но вот если смотреть "глазами робота" - "НА ЭТОМ САЙТЕ НЕТ ФОРУМОВ" и хоть ты тресни.

Как же это решить? Подскажите может можно отключить нафиг этх ботов, чтобы гулуя увидел сайт как пользователь?
С ЯндексБотом все ок.

Пчелкин · Сообщение **Пчелкин** » 27.04.2015 23:48

xuroo писал(а): чтобы гулуя увидел сайт как пользователь

Не увидит и не мечтай.

xuroo писал(а): роверка прав googlebot заканчивается тем, что вижу форум.

На группу ботов это не пролазит так как форум все равно ты видишь как бы собой

xuroo писал(а): прав группы боты уже 3 дня. Там копать то нечего.

Да ну? если ты сначала их профукал и не настроил, то сейчас придется -

rxu писал(а): Копайте в сторону форумных прав доступа

А воще - можно и не обращать на это внимания...гугловские боты выежистые щас по черному... Ни ситемап не хотят смотреть, ни роботикса... зажрались буржуи

apollion · Сообщение **apollion** » 28.04.2015 0:45

"Посмотреть как гуглбот" можно только в Гуглвебмастере на соответствующей вкладке. Там сразу будет видно после загрузки страницы как ее видит гуглбот.

Юлия · Сообщение **Юлия** » 17.09.2015 19:03

apollion писал(а): "Посмотреть как гуглбот" можно только в Гуглвебмастере на соответствующей вкладке. Там сразу будет видно после загрузки страницы как ее видит гуглбот.

у меня он постоянно выдаёт "Не доступен" так и не поняла в чём прикол

romaamor · Сообщение **romaamor** » 17.09.2015 19:11

Может просто гугл боту закрыт доступ ?

Юлия · Сообщение **Юлия** » 17.09.2015 19:24

Открыт, в том то и дело, там всё нормально...с ним единственным проблема

SashaMinsky · Сообщение **SashaMinsky** » 17.09.2015 20:16

Была похожая проблема, удалил и заново добавил бота, и все как рукой сняло. Видимо, со старым ботом потерялись какие-то права, а у нового они стали по умолчанию и он все увидел.
P.S. Но на всякий случай перед этим экспериментом я базу забекапил.

phpBB Guru - Официальная русская поддержка форума phpBB

Проблема доступа Google Bot

Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot

Re: Проблема доступа Google Bot