python實戰二：查看某網頁是用什麼編碼的，python實戰

python實戰二：查看某網頁是用什麼編碼的，python實戰

編程環境：虛擬linux （windows 下 cygwin）

識別某網頁的編碼方式，

usage： python coding http://www.***.com

測試結果：

python抓網頁的編碼問題

BeautifulSoup 版本有問題，使用3.03就可以了

import urllib2
from BeautifulSoup import BeautifulSoup

f = urllib.urlopen('www.baidu.com')

html=f.read()
f.close()
soup = BeautifulSoup()
soup.feed(html)
print soup
 
python 抓網頁編碼問題

#encoding:utf-8import urllib2url = 'f = urllib2.urlopen(url)content = f.read()f.close()content = content.decode('UTF-8').encode("gb2312")s1 = content.split(',')result1 = {}for s in s1: s2 = s.split('|') print s2[1] result1[s2[1]] = s2[0]print result1實測 可以了~
還有在字典裡的東西 直接print 出來 就是 一大串 百分比符號 什麼的是正常的~