Python學習---網頁爬蟲[下載圖片]

標籤：pytho   odi   none   正則匹配   http   str   tool   one   otto   

爬蟲學習--下載圖片

1.主要用到了urllib和re庫

2.利用urllib.urlopen()函數獲得頁面原始碼

3.利用正則匹配圖片類型,當然正則越準確，下載的越多

4.利用urllib.urlretrieve()下載圖片，並且可以重新命名，利用%S

5.應該是電訊廠商有所限制，所以未能下載全部的圖片，不過還是OK的

URL分析：

源碼：

#coding=utf-8import reimport urllibdef getHtml(url):    page=urllib.urlopen(url)    html=page.read();    return htmldef getImage(html):    reg=r‘src="(.*?\.jpg)" size‘    imgre=re.compile(reg)    imgeList =re.findall(imgre,html)    x=0    for image in imgeList:        urllib.urlretrieve(image,‘%s_hhh.jpg‘ % x)        x+=1html=getHtml("https://tieba.baidu.com/p/5256641773")getImage(html)

Python學習---網頁爬蟲[下載圖片]