使用js抓取今日頭條的文章

標籤：介面   ajax   文章   爬蟲   今日頭條   

首先驗證頭條介面是否支援jsonp，在介面地址的參數中添加callback=call

http://www.toutiao.com/pgc/ma/?page_type=1&count=10&version=2&platform=pc&media_id=52155491628&max_behot_time=0&as=A1A578A48B28B39&cp=584B080BD3899E1&callback=call

提供者，返回的資料為：call(...)的形式

650) this.width=650;" src="http://www.weare.net.cn/EasyWeb/upload/image/20161210/1481347241034045188.png" title="1481347241034045188.png" alt="blob.png" style="border:0px;vertical-align:middle;height:auto;" />

由此判斷介面支援jsonp，那麼接下來就好辦了，可以使用jsonp提供者，然後從返回資料中提取出所需要的資料。

var time = 0;var as_param;var cp_param;$(function(){var param = getParam();as_param = param.as;cp_param = param.cp;getWeare();});function getWeare(){$.ajax({url:"http://www.toutiao.com/pgc/ma/?page_type=1&count=10&version=2&platform=pc&media_id=52155491628&max_behot_time="+time+"&as="+as_param+"&cp="+cp_param+"&callback=tt",type:‘get‘,dataType:‘jsonp‘,jsonp:‘tt‘});}function tt(data){var tarray = [];if(data.has_more==1){var adata = data.data;for(var i = 0; i < adata.length; i++){var tmap = {};var title = adata[i].title;var link = adata[i].source_url;tmap[‘title‘] = title;tmap[‘url‘] = TT + link;tarray.push(tmap);}}}

如此，搞定

詳細代碼請訪問微兒部落格，可百度搜尋微兒部落格或者直接點擊 www.weare.net.cn

本文出自 “12366658” 部落格，請務必保留此出處http://12376658.blog.51cto.com/12366658/1882128

使用js抓取今日頭條的文章