如何识别文本的编码格式?

这个看似很简单的问题,确难住了我。由于我拿了一些非utf8编码的文本,要读必须要知道格式。而各种编辑软件是不会告诉你的,只能自己想办法。

解决方法:用16进制查看文件。用vim打开文件,输入 :%!xxd --将当前文本转化为16进制格式
根据前两个字节来判断,参与此文章https://stackoverflow.com/questions/4520184/how-to-detect-the-character-encoding-of-a-text-file/4522251#4522251。例如:utf16带有bom的前面是FF FE或FE FF.

你可能感兴趣的:(如何识别文本的编码格式?)