Битая кодировка всех сообщений у пользователя

[vlaimir]

Перешел с phpBB2 на phpBB3, в результате у одного пользователя все сообщения в другой кодировке. Как можно это исправить?

Ручками через декодер накладно, много сообщений.

[Sheer]

в другой кодировке

В какой?

Ручками через декодер накладно, много сообщений.

Написать скрипт.

[vlaimir]

Кодировка, как я понимаю: CP1252 у всех сообщений одного пользователя.

[Sheer]

Попробуй так

Код: Выделить всё

<?php
header('Content-Type: text/html; charset=UTF-8');
define('IN_PHPBB', true);
$phpbb_root_path = (defined('PHPBB_ROOT_PATH')) ? PHPBB_ROOT_PATH : './';
$phpEx = substr(strrchr(__FILE__, '.'), 1);
include($phpbb_root_path . 'common.' . $phpEx);
$user->session_begin();

    $sql = 'SELECT * FROM ' .POSTS_TABLE. ' WHERE poster_id = ид_пользователя';
    $result = $db->sql_query($sql);
    while ($row = $db->sql_fetchrow($result))
    {
        $new = iconv("UTF-8", "CP1251//IGNORE", $row['post_text']);
        $sqlc = "UPDATE " .POSTS_TABLE. " SET post_text = '.$new.' WHERE poster_id = ид_пользователя";
        $res = $db->sql_query($sqlc);
    }
?>

Где ид_пользователя = id пользователя с битой кодировкой.
NB! Предварительно сделать резервную копию!

[vlaimir]

Получил
General Error
SQL ERROR [ mysql4 ]

Incorrect string value: '\x96 ...' for column 'post_text' at row 1 [1366]

An sql error occurred while fetching this page. Please contact an administrator if this problem persists.

[Sheer]

Посыпаю голову пеплом, ибо

как я понимаю: CP1252

, а я воткнул 1251
поменяйте

Код: Выделить всё

$new = iconv("UTF-8", "CP1251//IGNORE", $row['post_text']); 

на

Код: Выделить всё

$new = iconv("UTF-8", "CP1252//IGNORE", $row['post_text']); 

и посмотрите, какое значение принимает переменная $new

Код: Выделить всё

print "$new<br />"; 

и на всякий случай проверьте кодировку http://www.artlebedev.ru/tools/decoder/

[vlaimir]

и посмотрите, какое значение принимает переменная $new

Текст printom выводит правильный, если убрать первую строчку:
header('Content-Type: text/html; charset=UTF-8');

но при вставке в базу опять выдает ошибку:
SQL ERROR [ mysql4 ]
Incorrect string value: 'xCFxF0xE8 xE8xF1...' for column 'post_text' at row 1 [1366]

Добавлено спустя 1 минуту 28 секунд:

и на всякий случай проверьте кодировку

раскодирует исходник, пишет:
CP1252 → CP1251

[Sheer]

Выложите тут (или в ЛС) дамп таблицы posts с выборкой сообщений этого конкретного пользователя.

[vlaimir]

Один из постов.

Код: Выделить всё

-- Дамп данных таблицы `phpbb3_posts`
--

INSERT INTO `phpbb3_posts` (`post_id`, `topic_id`, `forum_id`, `poster_id`, `icon_id`, `poster_ip`, `post_time`, `post_approved`, `post_reported`, `enable_bbcode`, `enable_smilies`, `enable_magic_url`, `enable_sig`, `post_username`, `post_subject`, `post_text`, `post_checksum`, `post_attachment`, `bbcode_bitfield`, `bbcode_uid`, `post_postcount`, `post_edit_time`, `post_edit_reason`, `post_edit_user`, `post_edit_count`, `post_edit_locked`) VALUES
(6195, 1003, 2, 1680, 0, '62.141.50.149', 1190465881, 1, 0, 0, 0, 1, 0, '', 'Êîððåêòèðîâêà ÿðêîñòè â InnerPulse', 'Ïðè èñïîëüçîâàíèè InnerPulse ñîâìåñòíî ñ î÷êàìè Premium (áåëûå) íàáëþäàåòñÿ íåðàâíîìåðíîñòü ñâå÷åíèÿ ïðàâîé è ëåâîé ãðóïï ñâåòîäèîäîâ. \r\n\r\nÝôôåêò íàèáîëåå çàìåòåí ïðè óìåíüøåíèè óðîâíÿ ÿðêîñòè ðåãóëÿòîðîì – ñíà÷àëà âûêþ÷àåòñÿ ïðàâàÿ ãðóïïà ñâåòîäèîäîâ, è, òîëüêî ïðè äàëüíåéøåì óìåíüøåíèè ÿðêîñòè, – ëåâàÿ.\r\nÈñïîëüçîâàíèå âñòðîåíîé â InnerPulse êîððåêòèðîâêè ÿðêîñòè (ìåíþ oPL) íå ïîçâîëÿåò ïîëíîñòüþ óñòðàíèòü ïðîáëåìó – ìîæíî âûðîâíÿòü ÿðêîñòè ñâåòîäèîäîâ ïðè çàôèêñèðîâàííîì ïîëîæåíèè îáùåãî ðåãóëÿòîðà ÿðêîñòè, îäíàêî, ïðè ïîñëåäóþùåì èçìåíåíè îáùåãî óðîâíÿ, ÿðêîñòü ãðóïï îïÿòü ñòàíîâèòñÿ íåðàâíîìåðíîé. Òàêæå, èçìåíåíèå ÿðêîñòè â ïðîöåññå âîñïðîèçâåäåíèÿ ïðåñåòîâ òîæå ïðèâîäèò ê íåðàâíîìåðíîñòè ñâå÷åíèÿ ñâåòîäèîäîâ. Ïîõîæå, âñòðîåíàÿ êîððåêòèðîâêà íå ó÷èòûâàåò çàêîí èçìåíåíèÿ ÿðêîñòè â çàâèñèìîñòè îò âûõîäíîãî íàïðÿæåíèÿ.\r\n\r\nÐàçëè÷èå â ñòåïåíè ðåàêöèè ïðàâûõ è ëåâûõ ñâåòîäèîäîâ ïðèâîäèò ê ñìåùåíèþ ôàç ñâåòîâûõ èìïóëüñîâ (õîðîøî çàìåòíî ïðè ìàëîé ÿðêîñòè), à, ñëåäîâàòåëüíî – ê èçìåíåíèþ õàðàêòåðà âîçäåéñòâèÿ ñòèìóëÿöèè íà àêòèâíîñòü ìîçãà. Âîçìîæíî òàêæå, ÷òî ïðîèñõîäèò îäíîñòîðîííÿÿ ðàññèíõðîíèçàöèÿ âèçàóëüíîãî è çâóêîâîãî âîçäåéñòâèé.\r\n\r\nÑãëàäèòü  íåðàâíîìåðíîñòü óäàåòñÿ òîëüêî ñóùåñòâåííûì óâåëè÷åíèåì îáùåé ÿðêîñòè. Ïîíÿòíî,  â ñëó÷àå î÷êîâ Premium, - ýòî íå âñåãäà ïðèÿòíàÿ ìåðà...\r\n\r\nÍàáëþäàåòñÿ ëè ïîäîáíûé ýôôåêò ïðè èñïîëüçîâàíèè äðóãîãî òèïà î÷êîâ? Óäàëîñü ëè êîìó-íèáóäü ðåøèòü óêàçàííóþ ïðîáëåìó?', '', 0, 'wA==', 'vyohapwd', 1, 0, '', 1680, 0, 0);

[Sheer]

Фиг знает...
Сделайте так

Код: Выделить всё

<?php
header('Content-Type: text/html; charset=utf-8');
define('IN_PHPBB', true);
$phpbb_root_path = (defined('PHPBB_ROOT_PATH')) ? PHPBB_ROOT_PATH : './';
$phpEx = substr(strrchr(__FILE__, '.'), 1);
include($phpbb_root_path . 'common.' . $phpEx);

    print "Starting...<br />";

    $fp2 = fopen('out.sql','wb');
    $sql = 'SELECT * FROM ' .POSTS_TABLE. ' WHERE poster_id = 1680';
    $result = $db->sql_query($sql);
    while ($row = $db->sql_fetchrow($result))
    {
        $new = iconv("UTF-8", "CP1252", $row['post_text']);
        $new_sumbj = iconv("UTF-8", "CP1252", $row['post_subject']);
        $sqlc = 'UPDATE ' .POSTS_TABLE. ' SET post_text = \''.$new.'\', post_subject = \''.$new_sumbj.'\' WHERE post_id = '.$row['post_id'].';';
        fwrite( $fp2, $sqlc);
        fwrite( $fp2, chr(13));
    }

    fclose($fp2);
    print "Done!";
?>

Проверьте кодировку у получившегося файлаout.sql. Откройте его в Notepad++, если кодировка будет ANSI сохраните в UTF-8 без BOM, затем импортируйте в phpMyAdmin.

[vlaimir]

Сделал, при запуске выдает:
Ответ MySQL: Документация
#1064 - You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'а.

Т.к. иÑ

Часть сообщений перекодировалась.
Теперь, чтобы делать новые перекодировки нужно удалять посты из запроса, которые уже перекодированы.

Добавлено спустя 44 минуты 15 секунд:
Нашел способ перекодировать через PhpMyAdmin.

Делаем выборку id и постов пользователя с битой кодировкой.
Затем выделяем их все и делаем их экспорт с функцией Update.

Полученный дамп загоняем в http://www.artlebedev.ru/tools/decoder/
и потом в PhpMyAdmin запускаем.