How to become an author
Search
Write a publication
Pull to refresh

Comments 51

кажется, разработчики немного не так поняли рвение менеджеров ровняться на apple…
Total votes 30: ↑29 and ↓1+28

Было бы интересно причину узнать, что именно там происходит

Total votes 6: ↑6 and ↓0+6
как обычно — неправильная обработка строк и протекание абстракций.
Total votes 11: ↑11 and ↓0+11
Интереснее другое: как эксплойт найти удалось. Кто-то чисто случайно кому-то это эмоджи отправил?
This comment wasn’t rated yet0
Ну или повторили стандартные варианты, которые уже были открыты для яблочных девайсов и прочих.
Total votes 3: ↑3 and ↓0+3
слава отличному коду и продвинутым языкам, которые умеют целиться в ногу!
Total votes 3: ↑3 and ↓0+3
Скорее всего вечный прикол с добавлением всяких склеек символов и алфавитов с прочтением наоборот.
Total votes 3: ↑3 and ↓0+3
utf8, говорили они.
Самая «совершенная» кодировка, говорили они.
Total votes 19: ↑16 and ↓3+13
После статей вида «как вычислить длину строки utf8» я очень прифигел
Total votes 2: ↑2 and ↓0+2

Можно пару ссылочек? Никак не найду похожих статей.

Total votes 1: ↑1 and ↓0+1
Можно глянуть, например, алгоритм кодирования на вики. Полагаю нормального способа узнать длину нет (если языком не предусмотрена библиотечная функция именно под utf-8) и придется играться с битовыми операциями.
Total votes 1: ↑1 and ↓0+1
UFO just landed and posted this here

utf8 это не кодировка а один из "контейнеров" для кодировки юникод. Чтобы в utf8 накосячить нужно уж очень постараться.

Total votes 6: ↑6 and ↓0+6

Очень даже легко накосячить. Стоит только выйти за значения байта > 127 и тут начинается магия не правильных последовательностей байт. А какой сюрприз мне сделали суррогатные пары в нём которые превращают два кодпойнта в один. А потом оказывается что его ещё и ограничили из за utf16 в котором как раз и используются эти соррогатные пары.

Total votes 4: ↑1 and ↓3-2
В UTF-8 нет суррогатных пар
Total votes 2: ↑2 and ↓0+2

Они есть в Unicode (диапазон 0xD800 — 0xDBFF) и как следствие могут быть во всех контейнерах.


UnicodeData.txt


D800;<Non Private Use High Surrogate, First>;Cs;0;L;;;;;N;;;;; 
DB7F;<Non Private Use High Surrogate, Last>;Cs;0;L;;;;;N;;;;; 
DB80;<Private Use High Surrogate, First>;Cs;0;L;;;;;N;;;;; 
DBFF;<Private Use High Surrogate, Last>;Cs;0;L;;;;;N;;;;;
This comment wasn’t rated yet0

В Юникоде эти символы просто зарезервированы и не несут особого смысла.

This comment wasn’t rated yet0
Они есть в UTF-16 но это не валидные символы Unicode (в таблице Unicode этот диапазон специально из-за UTF-16 зарезервирован чтобы туда никто символов не добавлял). Кроме того у UTF-8 технически нет вообще никаких проблем с тем чтобы их кодировать хотя многие compliant readers откажуется это делать вполне справедливо интерпретировав получение зарезервированного символа как ошибку декодирования. Все же кодировать с помощью UTF-8 не саму строку а ее бинарное представление записанное с помощью UTF-16 — это определенный бред. Но никакую «склейку двух кодпоинтов в один» они в UTF-8 в любом случае не порождают.
This comment wasn’t rated yet0

Notepad++


  1. HEX в UTF-8 (EDA0B4EDB480)
  2. Копируем полученную строку
  3. UTF-8 в HEX (F09D8480)

Мне этот символ аж комментарий порезал ))

This comment wasn’t rated yet0
Тут прикол в том, что на этапе «Копируем полученную строку» вы копируете ее в кодировке utf-16, где эти самые суррогатные пары как раз и используются. Поэтому ваш Notepad++ делает преобразование utf-8 — utf-16 — utf-8.
Total votes 1: ↑1 and ↓0+1
А можно поподробнее? Не могу воспроизвести в относительно свежем N++. HEX-ASCII, ASCII-HEX — нашёл (Plugins/Converter), а HEX-UTF8 — нет.
This comment wasn’t rated yet0

HEX-ASCII, ASCII-HEX это оно. Надо это делать в режиме UTF-8.
Может уже поправили. У меня он старый. У меня всё старое ибо XP 64.

This comment wasn’t rated yet0
Разобрался. У меня была отключена анимация гифок после обновления FF, поэтому не было очевидно что происходит.

Вообще, это классический случай неожиданного поведения в случае некорректных данных.

Этот поток байт не является корректным UTF-8 потоком, и с ним нельзя делать то, что оптимистично сделал N++. У меня он работает почти так же, только показывает один квадратик вместо двух.

На всякий случай декодировал поток вручную, чтобы не зависеть от багов какого-либо перекодировщика.

В общем, олдскульным программистам, видевшим DOS 3.x и однобайтные кодировки, придётся запомнить, что в нынешнем мире массив байт — это одно, а строка символов — совсем другое. Такова нынешняя реальность.
This comment wasn’t rated yet0
Так проблема-то в рендерере шрифтов. Что-то не видел я, чтобы таким способом положили устройство на Windows, Linux или Android. В основном этим страдали устройства Apple, ибо кодовая база для рендерера шрифтов у них одна. Как видим, Sony подсмотрела лучшие технологии у коллег.
Total votes 5: ↑5 and ↓0+5
UFO just landed and posted this here
Да-да, то самое «видеодрайвер перестал отвечать и был восстановлен». Очень радует меня эта восстанавливаемость, порой спасало данные от полной потери.
Total votes 2: ↑2 and ↓0+2
Хм, у меня обычно после «восстановления» видеодрайвера компьютер сразу же зависает в бесконечном цикле вылетов и восстановлений…
This comment wasn’t rated yet0
Видел такое «восстановление» видел только один раз в жизни. Что-то подсказывает что тут уже проблемы с железом.
Total votes 2: ↑2 and ↓0+2
у меня вообще было восстановление из голубого экрана на десятке один раз, выглядело как хренова магия. но у меня и правда видяха с при… дурью, скажем так.
This comment wasn’t rated yet0

Я недавно в Qt репортил похожий баг — цветной эмоджи на кнопке вызывал рандомный segfault. Если интересно, могу поискать, мне кажется плюс минус похожая проблема.

Total votes 3: ↑3 and ↓0+3
Это интересно было бы посмотреть!
Total votes 2: ↑1 and ↓10
Внезапно проверили концепцию «Темного леса» в сети PlayStation?
Total votes 2: ↑2 and ↓0+2
Что это за такая концепция? Уже не в первый раз вижу её упоминание, но гуглится плохо.
Total votes 1: ↑1 and ↓0+1
Emogi что ли используют в сообщении таком.

Язык этот знакомым кажется мне.
Total votes 21: ↑21 and ↓0+21
Это как в былые времена SMS смерти для телефонов Siemens и некоторых др.
Total votes 2: ↑2 and ↓0+2
Парадоксальным образом, такие баги встречались и до эмодзи и хитрых кодировок. Сейчас уже простым образом не находится, что именно там глючило и почему, но в стародавние времена при наличии определенной последовательности символов в тексте происходило глухое зависание компьютера при попытке просмотреть файл по F3 в Нортон Коммандере под старым добрым ДОСом. Причем, нарваться на эту последовательность можно было и в совершенно безобидных файлах.
Total votes 1: ↑1 and ↓0+1

Это Вы ещё не знаете о "залипании" бит (не данных) при некоторых последовательностях на печатных машинках. И переход в командный режим модема при наличии "+++" в сжатых данных…
И многое, многое иное.

Total votes 1: ↑1 and ↓0+1

Если не ошибаюсь, то несколько лет назад у apple была схожая бага, окирпичивающая аппарат.

Total votes 1: ↑1 and ↓0+1
Я не понял, производитель решил полностью забить на пользователей или ему так сложно экстренно добавить в движок обработки сообщений (в движок чата, на этапе приёма сообщения) фильтр на эту последовательность? А потом уже спокойно чинить багу «как надо».
Total votes 3: ↑3 and ↓0+3
Скорее всего, там целый класс последовательностей. Захардкодишь в заплатке одну — начнут использовать другую.
А что бы определить возможные варианты («как надо»), требуется время.
This comment wasn’t rated yet0
UFO just landed and posted this here
Проще забанить всех кто их отправляет, и приостановить регистрацию новых пользователей…
This comment wasn’t rated yet0
Там такой производитель который в 2018 анонсировал смену ников и скоро начнется бета-тест… ну вы поняли.
А когда все заработает то в некоторых играх новый ник может не работать. Ну вы…

Такой вот производитель.
Total votes 2: ↑2 and ↓0+2
А когда все заработает то в некоторых играх новый ник может не работать.

А как вы себе это представляете? Они все игры должны поправить?
Изменился API. Нужно переписать код, который с ним работает.
This comment wasn’t rated yet0
Я представляю это себе так: при закладке системы разработчики спустили на тормозах функцию изменения ника. И было это примерно эдак в 2007 а не в 1995 когда еще можно было бы списать это.
Total votes 1: ↑1 and ↓0+1
Верю, что вы всегда всё делаете правильно и с первого раза.
This comment wasn’t rated yet0
Sign up to leave a comment.

Articles

Show the best of all time

Your account

Sections

Information

Services

Support
© 2006–2024, Habr