用chardet判斷字元編碼的方法

來源:互聯網
上載者:User

chardet 用來實現字串/檔案編碼檢測模板

1、chardet下載與安裝

:http://pypi.python.org/pypi/chardet

下載chardet後,解壓chardet壓縮包,直接將chardet檔案夾放在應用程式目錄下,就可以使用import chardet開始使用chardet了,也可以將chardet拷貝到Python系統目錄下,這樣你所有的python程式只要用import chardet就可以了。

python setup.py install

2、執行個體

使用中,chardet.detect()返回字典,其中confidence是檢測精確度,encoding是編碼形式

(1)網頁編碼判斷:

>>> import urllib
>>> rawdata = urllib.urlopen('http://www.google.cn/').read()
>>> import chardet
>>> chardet.detect(rawdata)
{'confidence': 0.98999999999999999, 'encoding': 'GB2312'}

(2)檔案編碼判斷

import chardet
tt=open('c:\\111.txt','rb')
ff=tt.readline()
#這裡試著換成read(5)也可以,但是換成readlines()後報錯
enc=chardet.detect(ff)
print enc['encoding']
tt.close()

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.