chardet库是python的字符编码检测器,能够检测出各种编码的类型,例如:
1 import chardet 2 import urllib.request 3 4 testdata = urllib.request.urlopen('http://m2.cn.bing.com/').read() 5 print(chardet.detect(testdata))
运行结果:
{'confidence': 0.99, 'encoding': 'utf-8'}
翻译一下就是:
{'精准度': 99%, 'encoding(编码形式)': 'utf-8'}
没见识到这个库之前所有编码纯属自己的记忆:
# unicode_escape
u4e2du56fd
# gbk或者utf-8 xd6xd0xb9xfa 中国
# urlencode %e4%b8%ad%e5%9b%bd
# Gb2312 %d6%d0%b9%fa
这些编码纯属需要眼睛辨认再去网上查找编码
现在发现了chardet这个库后方便了很多