文件读取出错的坑:UnicodeDecodeError: 'utf-8' codec can't decode byte 0xff in position 0: invalid start byte

df = pd.read_csv(’./twittersampletest.csv’)
报错 UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xff in position 0: invalid start byte

意思:
0xff 意外出现在了第一个字节的位置。系统默认采用 UTF8 解码。UTF8 中编码一个字符的第一个字节只可能是 0xxxxxxx、110xxxxx、1110xxx、11110xxx……不可能是0xff

原因:因为文件不是 UTF8 编码的,例如数据文件在保存时以二进制形式保存,读取时应以二进制形式读取。
解决方法:是改为对应的解码方式。加上 rb
df = pd.read_csv(’./twittersampletest.csv’,“rb”)

你可能感兴趣的:(数据挖掘,坑)