Как я могу определить кодировку текста?

Question

Как определить, в каком формате кодируется какой-либо текст, ASCII, Unicode или UTF-8?

Answer 1

Краткий ответ

Не существует гарантированного способа обнаружения кодировки произвольного набора байтов.

---

Длинный ответ

• Как определить кодировку / кодовую страницу текстового файла
• Java: как определить правильную кодировку кодировки потока
• Как надежно угадать кодировку между MacRoman, CP1252, Latin1, UTF-8 и ASCII
• GuessEncoding - работает только для UTF-8, UTF-16LE, UTF-16BE и UTF-32 ☹
• Детектор кодировки ICU
• cpdetector , бесплатное обнаружение кодовой страницы Java
• JCharDet (порт Java детектора кодировки Mozilla) _{^{по иронии судьбы, эта страница неправильно отображает апостроф в "Mozilla's"}}

Сорвал с моего ответа здесь .

---

Смотри также

• Типичное предложение: Джоэл по программному обеспечению Абсолютный минимум Каждый разработчик программного обеспечения должен абсолютно точно знать о Unicode и наборах символов (без оправданий!)
• «Unicode» - это , а не кодировка. В чем разница между юникодом и utf8?
• Кроме того, вам, вероятно, следует прочитать , как задавать вопросы о переполнении стека: Обращение за помощью