學習python處理python編碼問題

來源:互聯網
上載者:User

概括、從python1.6開始就可以處理unicode字元了。
一、幾種常見的編碼格式。
1.1、ascii,用1個位元組表示。
1.2、UTF-8,用1個至三個位元組表示,表示ascii碼時只佔用1個位元組,ascii編碼是UTF-8的子集。
1.3、UTF-16,用2個位元組表示,在python中,unicode的含義就是UTF-16。
二、python源檔案的編碼與解碼,我們寫的python程式從產生到執行的過程如下:
編輯器---->原始碼---->解譯器---->輸出結果
2.1、編輯器決定原始碼的編碼格式(在編輯器中設定)
2.2、也必須要解譯器知道原始碼的編碼格式(很遺憾很難從編碼的資料獲知源檔案的編碼格式)
2.3、補充:在Windows下當用UltraEdit把原始碼存成UTF-8時,會在檔案中記錄BOM標誌(不必祥究)這樣ActivePython解譯器會自動識別源檔案是UTF-8格式,但是如果用eclipse編輯源檔案,雖然在編輯器中指定檔案編碼為UTF-8,但是因為沒有記入BOM標誌,所以必須在源檔案開始處加上#coding=utf-8,用注釋來提示解譯器源檔案的編碼方式挺有意思。
2.4、舉例:例如我們要向終端輸出"我是中國人"。 複製代碼 代碼如下:#coding=utf-8 告訴python解譯器用的是utf-8編碼,我用的是eclipse+pydev
print "我是中國人" #源檔案本身也要存成UTF-8編碼

三、編碼的轉換,兩種編碼的轉換要用UTF-16作為中轉站。
舉例:如果有一個文字檔jap.txt,裡面有內容 "私は中國人です。",編碼格式是日文編碼SHIFT_JIS,
還有一個文字檔chn.txt,內容是"中華人民共和國",編碼格式是中文編碼GB2312。
我們如何把兩個檔案裡的內容合并到一起並儲存到utf.txt中並且不顯示亂碼呢,可以採用把兩個檔案的內容都轉成UTF-8格式,因為UTF-8裡包含了中文編碼和日文編碼。 複製代碼 代碼如下:#coding=utf-8
try:
JAP=open("e:/jap.txt","r")
CHN=open("e:/chn.txt","r")
UTF=open("e:/utf.txt","w")
jap_text=JAP.readline()
chn_text=CHN.readline()
#先decode成UTF-16,再encode成UTF-8
jap_text_utf8=jap_text.decode("SHIFT_JIS").encode("UTF-8") #不轉成utf-8也可以
chn_text_utf8=chn_text.decode("GB2312").encode("UTF-8")#編碼方式大小寫都行utf-8也一樣
UTF.write(jap_text_utf8)
UTF.write(chn_text_utf8)
except IOError,e:
print "open file error",e

四、Tk庫支援ascii,UTF-16,UTF-8
複製代碼 代碼如下:#coding=utf-8
from Tkinter import *
try:
JAP=open("e:/jap.txt","r")
str1=JAP.readline()
except IOError,e:
print "open file error",e
root=Tk()
label1=Label(root,text=str1.decode("SHIFT_JIS")) #如果沒有decode則顯示亂碼
label1.grid()
root.mainloop()

以上是學習python處理python編碼的基本過程,希望對大家有協助。

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.