Нагрузка на сервер от phpbb3

[kolega777]

kolega777
Ничего экстраординарного в этих запросах не вижу. Есть вероятность, что вас кто-то долбит, например, боты, или какой-нибудь парсер. Попробуйте поискать что-нибудь подозрительное в акцесс логах.

Можно подробней описать мои действия? Я только поверхностно знаю пхп, только учусь, а ученье свет. Сижу забаненый...50 онлайнеров 600-800 уникалов в день...

Добавлено спустя 1 минуту 50 секунд:
Палыч
Простите..исправлюсь.

[Alek$]

kolega777
просматривайте acces_log веб-сервера, смотрите, если попадаются нестандартные юзерагенты и либо вовсе баньте их, либо добавляйте в список ботов.

[kolega777]

Как выделить "нестандартных"?
И еще ..чуть выше писали про парсинг..как бороться? И как понять что это именно он грузит запросами?

[Alek$]

kolega777
нестандартные - это не принадлежащие известным поисковикам и браузерам.

И как понять что это именно он грузит запросами?

Если с одного и того же IP много обращений - значит грузит.

[savches]

Меня в свое время банили за то, что запросы были с перегрузками с моего же ip (в том числе).
Если это не атака, как в моем случае, то придется банить всех, кто ходит на форум...
Но очень надеюсь, что у тебя все же другой случай.

[kolega777]

Спасибо за помощь.
Файл глянул в нем кроме одиноких айпишек есть повторение подряд по 10-40 записей.
Что это значит? Вот пример.
194.105.144.130 - - [05/Jun/2009:14:47:49 +0300] "GET /forum/styles/subsilver2/theme/prime_links/prime_links.css HTTP/1.1" 404 - "мой сайт/forum/search.php?search_id=active_topics" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.0.10) Gecko/2009042316 Firefox/3.0.10"
194.105.144.130 - - [05/Jun/2009:14:47:49 +0300] "GET /forum/styles/subsilver2/theme/stylesheet.css HTTP/1.1" 304 - "мой сайт/forum/search.php?search_id=active_topics" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.0.10) Gecko/2009042316 Firefox/3.0.10"
194.105.144.130 - - [05/Jun/2009:14:47:49 +0300] "GET /forum/search.php?search_id=active_topics HTTP/1.1" 200 117041 "мой сайт/forum/viewtopic.php?f=1&t=6529&start=60" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.0.10) Gecko/2009042316 Firefox/3.0.10"
194.105.144.130 - - [05/Jun/2009:14:47:49 +0300] "GET /forum/styles/subsilver2/imageset/site_logo.gif HTTP/1.1" 304 - "мой сайт/forum/search.php?search_id=active_topics" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.0.10) Gecko/2009042316 Firefox/3.0.10"

[RedNaxi]

kolega777
это значит что браузер загрузил страницу

GET /forum/search.php?search_id=active_topics

, а на этой странице есть ссылки на цсс файлы или картинки

/forum/styles/subsilver2/theme/stylesheet.css,/forum/styles/subsilver2/theme/prime_links/prime_links.css

и браузер запрашивает и загружает их тоже. в этом нет ничего странного, это нормально и не должно особого грузить сервер. сервер сильно грузится если происходит сразу много запросов php файлов - потому что это требует обращения к сторонним программам (php,mysql), которые требуют ресурсов сервера. соответственно всякие парсеры, которые пытаюсь получить какие то данные из вашего форума в автоматическом режиме, грузят сразу кучу пхп файлов для анализа, из за чего сервер сильно грузится - по сравнению с пользователем, который после загрузки одного файла некоторое время его читает, парсеру нужен минимум времени для того чтобы проанализировать скачанный файл и он требует следующий. если известные поисковые системы разрабатывают своих роботов так, чтобы они не грузили сервера лишними запросами, а некоторые поисковики даже позволяют с помощью спец.директив настроивать нагрузку на сервер от их роботов, то самописные парсеры страниц обычно себя таким не утруждают и грузят сервер по полной.

вас в данном случае должна интересовать вот эта часть строки:

(Windows; U; Windows NT 5.1; ru; rv:1.9.0.10) Gecko/2009042316 Firefox/3.0.10

там должно быть что то

не принадлежащее известным поисковикам и браузерам.

это одна из возможных причин большой нагрузки на сервер.

[Leviafant]

Сегодня переехал на другой хост, на старом стоял php 5.2.6 - Memory Usage: 5.12 Мб, на новом php 5.2.9 - Memory Usage: 3.16 Мб
Неужто версия пхп так сильно влияет на количество потребляемой памяти?

[rxu]

А что, ничего, кроме версии PHP, не изменилось?

[Leviafant]

Версия MySQL была на старом хосте 5.0.77-community
на новом 5.0.67-community,
Версия Apache 1.3.41 (Unix) на старом
и 2.0.63 на новом
больше вроде ничего не изменилось. вся информация бралась из cpanel

[Rayden]

Первый и второй апач - это две большие разницы.
Скорее всего из-за него.

[Pharmacist]

Скажите пожалуйста, а как уменьшить количество запросов к базе или где почитать про оптимизацию. Я смотрю на phpbbguru, где бы не лазил по форуму больше 15 запросов к базе не было, в среднем 10-13 и меньше. У меня из модов стоят:
- Быстрый ответ от rxu
- Благодарности
- Сайтмап от FladeX
- Хайд от Izya
- Advances last topic title
- Quick login
Иногда при загрузке некоторых тем до 35 запросов доходит. При залогинивании юзера до 20, главная страничка 8-10 запросов... Количество юзеров пока не большое, а когда выростет этож ужос будет...
Настройки всех модов выставлены по минимуму.

[Izya]

Из всех перечисленных модов дополнительные sql-запросы на страницы просмотра тем добавляют только благодарности, если не ошибаюсь.

[Pharmacist]

Izya, ок, спасибо, попробую сегодня отключить, тогда отпишусь как повлияло...

Добавлено спустя 4 минуты 26 секунд:
Кстати только что заметил, отправил сообщение и на странице промежуточной, после отправки, количество запросов - 37...

Добавлено спустя 2 минуты 57 секунд:
А вот при пролистывании самой темы количество запросов - маленькое.

[kolega777]

Случайно вспомнил об этой теме.
Я тоже был тут участником, с письмами от хостера.
Меня все достало, переехал к другому и счастье! Проблем больше нет.
ХОСТПРО просто кидают нас..