Автоцензор, исправление автоцензора

[Lokust]

Никто не придумал еще, как сделать чтобы автоцензор заменял отельные слова, а не каверкал бы их, выдирая внутри них какую-либо часть?

Пример:
"Употреблять" заменяется на " Употреcensored"

[piatachki]

Пробелы ставить не пробовали перед и после стоп-слова?

Только в таком случае весь мат будет проходить, потому что на любое "выражение" я могу столько словоформ придумать

[Поручик]

А вы в курсе, что в Олимпусе автоцензор для нелатиницы глючный, и когда пофиксят, хз, а по сути, это дело отдали на откуп национальным саппортам?

[piatachki]

Поручик
А в смысле он должен и без пробелов в идеале работать?

[crash]

в идеале должен работать правильно, сейчас он не работает так как надо

[rxu]

Если кто-то очень хорошо дружит с PRCE, поправьте следующую регулярку в includes/cache.php function obtain_word_list() так, чтобы с мультибайтом работало

Код: Выделить всё

				$censors['match'][] = '#(?<!\w)(' . str_replace('\*', '\w*?', preg_quote($row['word'], '#')) . ')(?!\w)#i';

Сразу скажу, что простое добавление модификатора u не спасает.

[Lokust]

Пробелы ставить не пробовали перед и после стоп-слова?
Только в таком случае весь мат будет проходить, потому что на любое "выражение" я могу столько словоформ придумать

Лично у меня фишка с пробелами тоже не проходит... они просто не сохраняются, как я понял

[nissin]

возможно поможет вставка вызова

Код: Выделить всё

setlocale(LC_ALL,'ru_RU.UTF-8');

если конечно эта локаль есть у хостера.

[Lokust]

возможно поможет вставка вызова

А где именно это вставить?

[nissin]

нашёл попроще решение.
заменить строчку которую rxu несколько постов выше написал на

Код: Выделить всё

				$censors['match'][] = '#(?<!\S)(' . str_replace('\*', '\S*?', preg_quote($row['word'], '#')) . ')(?!\S)#iu';

и не забыть почистить кэш (либо просто удалить /cache/data_word_censors.php).

[rxu]

nissin
А со свойствами юникода, например \p{L} и подобными, не пробовали поиграть?

[nissin]

Проверил, оказывается тоже работает.

Код: Выделить всё

				$censors['match'][] = '#(?<!\pL)(' . str_replace('\*', '\pL*?', preg_quote($row['word'], '#')) . ')(?!\pL)#iu';

[rxu]

даже указание локали ru_RU.UTF-8 ему не помогает.

И не поможет, ибо в includes/utf/utf_tools.php локаль переопределяется заново на

Код: Выделить всё

// Enforce ASCII only string handling
setlocale(LC_CTYPE, 'C');

Вот если её здесь поменять, то будет работать и с "\w".

[nissin]

Я тоже так думал. Но не помогает шабака.
Чукча не дурак, он вызов setlocale перед preg_replace поставил.
А после обратно локаль вернул.

А там менять нельзя, функции UTF8 перестанут нормально работать.

[rxu]

Сейчас просто закомментировал, работает... Правда, не уверен, работают ли остальные функции UTF.
Насколько я понимаю, этот вызов setlocale вставлен для страховки, ибо некоторые локали ломают нормальную работу этих функций. Не уверен, что русская локаль относится к таковым ("ломающим").