Настройка поискового механизма Sphinx Fulltext в debian

[Siava]

rxu, не сталкивался вроде, но у меня почти 700к сообщений, поэтому мог и не заметить.. к тому же полную реиндексацию запускаю раз в 24 часа. Попробую проверить, но ближе к выходным.

Отправлено спустя 54 минуты 7 секунд:

новое содержимое отредактированных постов

Подтверждаю. В дельта-индекс не попадает.

[rxu]

Подтверждаю. В дельта-индекс не попадает.

М-да. А что с этим делать, какой код ядра за это отвечает? На ветке 4.x почему-то работает.

[rxu]

Siava, в ядре используется sphinxapi.php для операций поиска и обновления данных в индексе (UpdateAttributes()), при этом все равно необходима переиндексация на стороне сервера?

[Siava]

rxu, да, ибо со стороны движка форума никаких операций записи в индекс не происходит, - только чтение из него.

Если в движке заложены функции записи в индекс, тогда предположу, что демон sphinx (searchd) должен запускаться от имени пользователя, под которым работает веб-сервер. Но я всегда думал, что форум только читает индекс.

[rxu]

Но я всегда думал, что форум только читает индекс.

Неа, обновляет тоже.

тогда предположу, что демон sphinx (searchd) должен запускаться от имени пользователя, под которым работает веб-сервер.

chmod 777 не поможет?

[Siava]

rxu, я проверил сейчас. В админке есть возможность создать или удалить индексы. Но создание или удаление их оттуда никак не затрагивает индексы, которые расположены в "Путь к папке с данными".

[rxu]

В админке есть возможность создать или удалить индексы.

Это не то, там только создается таблица phpbb_sphinx в БД форума, в которой хранится айдишник крайнего сообщения.

[Siava]

rxu, поигрался только что на тестовом форуме. Ну никак движок не влияет на индексы, даже с chmod 777

[rxu]

Siava, при редактировании контента должен влиять как минимум https://github.com/phpbb/phpbb/blob/996 ... x.php#L847

Отправлено спустя 1 минуту 34 секунды:
А можно как-то через PHP заставить обновиться индекс?

[im0]

при редактировании контента должен влиять как минимум

Данный код обновляет только атрибуты (forum_id и poster_id) — видимо на случйай смены автора и перемещения сообщения, а вот для срочного обновления документа в индексе видимо придётся делать финт ушами: например сохранять идентификаторы изменённых документов (можно в той же таблице sphinx) — можно воспользоваться ближайшим событием core.search_sphinx_index_before, и изменить немного delta-запрос, чтобы он кроме добавленных документов также сканировал и изменённые… Да, а в main-запрос добавить удаление этих накопленных идентификаторов из таблицы.

Таким образом получится оперативно вносить в индекс изменённые документы (со скоростью обновления delta-индекса, а это достаточно оперативно), но удалённый текст из сообщения по-прежнему будет оставаться в основном индексе и отредактрированное сообщение будет попадать в результат поиска по уже удалённым ключевым словам (разумеет до тех пор пока не переобновится основной индекс). Тоже самое касается и полностью удалённых сообщений (здесь можно посмотреть в сторону пакамера sql_query_killlist, но я пока не проверял и не заморачивался).

Либо, второй вариант — использовать RT-индексы, но для этого придётся больше менять в движке форума, так что не рассматриваю их.

Отправлено спустя 3 минуты 25 секунд:

На ветке 4.x почему-то работает.

А вот это любобытно. Подскажите где можно посмотреть исходники 4-ки (а ещё лучше как поставить себе) — хотелось бы глянуть как там это переделали.

Отправлено спустя 2 минуты 36 секунд:
PS. Люди добрые — дайте возможность редактировать свои сообщения — ненавижу когда невозможно исправить очепятки :(

[rxu]

исходники 4-ки (а ещё лучше как поставить себе)

Например, отсюда https://bamboo.phpbb.com/artifact/PHPBB ... a1-dev.zip

хотелось бы глянуть как там это переделали.

Дело как раз в том, что по факту там ничего не переделано, но работает.

[im0]

Например, отсюда

Вот я дерево — это же ветка мастер! Спасибо, всё обыскал а туда не заглянул ;)

Дело как раз в том, что по факту там ничего не переделано, но работает.

Действительно, существенных изменений нет, но к сожалению у меня эффект такой же как и на phpbb3: после изменения сообщения новый текст не находится до тех пор, пока индексатор не запихает его либо в дельта-индекс либо в главный :(

У вас на 4.x точно sphinx используется? Как часто индексатор срабатывает (основной и дельта)?

[rxu]

У вас на 4.x точно sphinx используется?

Точно.

Как часто индексатор срабатывает (основной и дельта)?

Не знаю, я сужу по функциональному тесту, который проходит для ветки master и не проходит для 3.3.x.

[im0]

я сужу по функциональному тесту, который проходит для ветки master и не проходит для 3.3.x.

Как выглядит тест?

[rxu]

https://github.com/phpbb/phpbb/blob/mas ... -sphinx.sh
https://github.com/phpbb/phpbb/blob/mas ... x_test.php