python簡單爬蟲

標籤：for   print   items   爬取   coding   .text   port   code   lin   

      學了幾天python，寫了個簡單的爬蟲程式（爬取酷我音樂熱門排行榜）：

 

 1 #! -*- coding:utf-8 -*- 2  3 import requests 4 import pyquery 5 from pyquery import PyQuery as pq 6  7 # 爬取酷我音樂熱門排行榜 8 headers = { 9     ‘User-Agent‘: ‘Mozilla/5.0 (X11; Linux x86_64; rv:52.0) Gecko/20100101 Firefox/52.0‘}  # 設定User-Agent頭，繞過反爬蟲機制10 url = "http://www.kuwo.cn/bang/index"  # 爬取的地址11 html = requests.get(url, headers=headers)  # 擷取網頁內容12 a = pq(html.text)13 b = a(‘.name‘).find(‘a‘)14 for c in b.items():15     print(c.html())16 print("爬取完成！")17 18 19  

 

python簡單爬蟲