用chardet判斷字符編碼的方法


chardet 用來實現字符串/文件編碼檢測模板

1、chardet下載與安裝

下載地址:http://pypi.python.org/pypi/chardet

下載chardet后,解壓chardet壓縮包,直接將chardet文件夾放在應用程序目錄下,就可以使用import chardet開始使用chardet了,也可以將chardet拷貝到Python系統目錄下,這樣你所有的python程序只要用import chardet就可以了。

python setup.py install

2、實例

使用中,chardet.detect()返回字典,其中confidence是檢測精確度,encoding是編碼形式

(1)網頁編碼判斷:

>>> import urllib
>>> rawdata = urllib.urlopen('http://www.google.cn/').read()
>>> import chardet
>>> chardet.detect(rawdata)
{'confidence': 0.98999999999999999, 'encoding': 'GB2312'}

(2)文件編碼判斷

import chardet
tt=open('c:\\111.txt','rb')
ff=tt.readline()
#這里試着換成read(5)也可以,但是換成readlines()后報錯
enc=chardet.detect(ff)
print enc['encoding']
tt.close()






免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM