Python爬蟲--timeout設定--防止訪問時間過長造成假死__Python

爬蟲有時候會因為爬去某些網頁速度極慢，影響效能。所有可以設定逾時時間。
timeout單位秒
設定逾時時間為0，使用try語句。

#coding:utf-8**urllib2**逾時可以通過 urllib2.urlopen() 的 timeout 參數直接設定。例如:#coding:utf-8import urllib2try:    url = "http://www.baidu.com"    f = urllib2.urlopen(url, timeout=0) #timeout設定逾時的時間    result = f.read()    print resultexcept Exception,e:    print 'a',str(e)

輸出異常:

a <urlopen error timed out>

timeout設定為一之後就能正常返回擷取的html代碼了。