python requests 基礎學習

標籤：

　　首先，Python 標準庫中的 urllib2 模組提供了你所需要的大多數 HTTP 功能，但是它的 API 不友好。它是為另一個時代、另一個互連網所建立的。它需要巨量的工作，甚至包括各種方法覆蓋，來完成最簡單的任務，所以學習reuqests模組，比較簡潔好用（以後慢慢會學習scapy，更強大的庫），安裝就不用說了

 

1 匯入模組

　　>>> import requests

2 直觀感受一下發送請求的簡潔

　　>>> r = requests.get(‘your url‘)

　　>>> r = requests.post(‘your url‘)

　　#put delete head options方法也是這種用法

3 為url傳遞參數

　　>>> url_params = {‘key‘:‘value‘} #字典傳遞參數，如果值為None的鍵不會被添加到url中

     >>> r = requests.get(‘your url‘,params = url_params)

     >>> print(r.url)

　　your url?key=value

4 響應的內容

      >>> r.encoding #擷取當前的編碼

　　>>> r.encoding = ‘utf-8‘ #設定編碼

　　>>> r.text #以encoding解析返回內容

　　>>> r.content #以位元組形式（二進位）返回

　　>>> r.json() #以json形式返回,前提返回的內容確保是json格式的，不然解析出錯會拋異常

5 定製頭和coookie資訊

　　>>> header = {‘User-Agent‘:‘Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/38.0.2125.122 Safari/537.36 SE 2.X MetaSr 1.0‘}

　　>>> cookie = {‘key‘:‘value‘}

　　>>> r = requests.get/post(‘your url‘,headers=header,cookies=cookie) 

6 發送post資料請求

　　>>> send = {‘key‘:‘value‘}

　　>>> r = requests.post(‘your url‘,data = send)  # 如果你傳遞一個 string 而不是一個dict ，那麼資料會被直接發布出去,這個也可以上傳檔案

7 響應狀態代碼

　　>>> r.status_code #如果不是200，可以使用 r.raise_for_status() 拋出異常

8 響應

　　>>> r.headers #返回字典類型,頭資訊

　　# r.requests.headers 返回傳送到伺服器的頭資訊

　　>>> r.cookies #返回cookie

　　>>> r.history #返回重新導向資訊,當然可以在請求是加上allow_redirects = false 阻止重新導向

9 逾時

　　>>> r = requests.get(‘url‘,timeout=1)#設定秒數逾時，僅對於串連有效

 

10 會話對象,讓你能夠跨請求保持某些參數

　　>>> s = requests.Session()

　　>>> s.auth = (‘auth‘,‘passwd‘)

　　>>> s.headers = {‘key‘:‘value‘}

　　>>> r = s.get(‘url‘) 

　　>>> r1 = s.get(‘url1‘) 

11 代理

　　>>> proxies = {‘http‘:‘ip1‘,‘https‘:‘ip2‘ }

　　>>> requests.get(‘url‘,proxies=proxies)

 

 

python requests 基礎學習