python分布式爬蟲css選取器

標籤：ons   技術   alt   固定   text   rip   log   ide   strong   

css選取器：

 

excract_first  如果數組為空白會拋出異常 用了這個函數之後，就不存在異常，如果提取不到就為空白

 

 

 

提取出 標題：

======================================================================

:: 是css固定用法 用來提取內容

response.css(‘.entry-header h1::text‘).extract()[0]

 

>>> response.css(‘p.entry-meta-hide-on-mobile::text‘).extract()[0]‘\r\n\r\n            2017/02/18 ·  ‘>>> response.css(‘p.entry-meta-hide-on-mobile::text‘).extract()[0].strip()‘2017/02/18 ·‘>>> response.css(‘p.entry-meta-hide-on-mobile::text‘).extract()[0].strip().replace(‘·‘, ‘ ‘)‘2017/02/18  ‘

 

 

>>> response.css(‘.vote-post-up h10::text‘).extract()[‘2‘]

response.css(‘a[href="#article-comment"] span::text‘).extract()[0]‘ 7 評論‘

完整代碼

 

 

python分布式爬蟲css選取器