python中煩人的編碼問題

標籤：

mysql資料中都是UTF編碼，匯出到檔案稱csv還是xls都是utf-8，用python的pandas讀取可以，但每次寫代碼的時候都需要很小心看檔案原來是什麼編碼

比如如果在read_csv()中沒用encoding轉換為Unicode編碼的話在後面的欄位名什麼都要用.decode(‘utf-8‘)來解碼巨麻煩，而且在用to_csv()之類的儲存時候還得再次用到encoding編碼將其Unicode轉換為utf-8,而且好像window都不認utf-8的，果然還是應該轉換為gbk呢，，，

最最關鍵是python在shell和內建的IDEL中的編碼竟然是不同的！！明明在IDEL中用encoding=utf，也就是 ：

#coding=UTF-8

print repr(‘我‘)

#這個是一個utf編碼

print repr(u‘我‘)

#這個是一個Unicode

print repr(‘我‘.decoding=‘UTF-8‘)

#這個是一個Unicode

但在shell中卻是：

print repr(‘我‘)

#這個是一個GBK編碼

print repr(u‘我‘)

#這個是一個用unicode來讀的GBK編碼，也就是亂碼。。。

print repr(‘我‘.decode(‘gbk‘))

#這個才是一個Unicode

以後再window平台不管三七二一都改成GBK編碼算了，省心

python中煩人的編碼問題