Проблемы с кодировкой при обрезании текста

[DAS-X]

Добрый день.

Решил обновить динозавра 2.3 до более актуальной версии. Наткнулся на известную проблему с кодировкой, но в необычном месте (см.вложение). То есть везде все символы отображаются нормально, кроме обрезанного текста. Все таблицы в urf8-general-ci. Куда можно копнуть?

 

[Arhar]

тут такое дело - в таблице уже записаны символы в двухбайтном виде, и при обрезании может случиться такое, что один байт вылезет (от одной буквы), а второй обрежется - получаем картинку

как исправить - можно искать в гугле

а вообще в идеале переписать весь код форума, где есть substr и подобное, на mb_substr и аналогичное

 

P.S. ах, да, в тройке ничего нельзя переписывать, атониабнавишься

[Denis Chursinov]

Ну вроде локализация для того и сделана, чтоб эти все mb добавить где надо. И еще надо посмотреть на кодировку соединения. Бывает, что таблица в UTF, а соединение в latin1 и все функции думают, что это однобайтовая кодировка.

[DAS-X]

тут такое дело - в таблице уже записаны символы в двухбайтном виде, и при обрезании может случиться такое, что один байт вылезет (от одной буквы), а второй обрежется - получаем картинку

как исправить - можно искать в гугле

а вообще в идеале переписать весь код форума, где есть substr и подобное, на mb_substr и аналогичное

 

P.S. ах, да, в тройке ничего нельзя переписывать, атониабнавишься

Так то я понимаю, что проблема именно в этом, и даже про нелюбовь к mbstring'у знаю... Не совсем понимаю, как запрос сформулировать.

Конвертация в utf8mb4 решает проблему?

[Denis Chursinov]

Не решит. Тут с 2х-то байтовой последовательностью проблема, а у вас 4х байтовая будет. Вообще, мне казалось, что даже в оригинальной версии проблема была решена как минимум в 3.4.6, а то и раньше. На 3.4.6 на ипсовском хостинге http://ibresource.invisionconnect.com/проблемы не видно, значит mb там все=таки есть. 
Все mb* функции в ipb вызываются через враппер, который проверяет их наличие. Проверьте есть ли у вас расширение  mb_string вообще , может оказаться все гораздо проще - его просто нет.
 

[DAS-X]

Не решит. Тут с 2х-то байтовой последовательностью проблема, а у вас 4х байтовая будет. Вообще, мне казалось, что даже в оригинальной версии проблема была решена как минимум в 3.4.6, а то и раньше. На 3.4.6 на ипсовском хостинге http://ibresource.invisionconnect.com/проблемы не видно, значит mb там все=таки есть. 

Все mb* функции в ipb вызываются через враппер, который проверяет их наличие. Проверьте есть ли у вас расширение  mb_string вообще , может оказаться все гораздо проще - его просто нет.

 

Есть конечно mbstring. И latin1 в помине не было... Везде стоит utf8.

Починил

Изменено 21 Января 2015 пользователем DAS-X