PHP類比登陸抓取頁面內容

來源:互聯網
上載者:User
平時開發中經常會遇到抓取某個頁面內容, 但是有時候某些頁面需要登陸才能訪問, 最常見的就是論壇, 這時候我們需要來使用curl類比登陸。 大致思路:需要先請求提取 cookies 並儲存,然後利用儲存下來的這個cookies再次發送請求來擷取頁面內容,下面我們直接上代碼

 'pythontab',    'password'  => 'pythontab',);//curl初始化$ch = curl_init();curl_setopt($ch, CURLOPT_URL, $url);//設定為post請求curl_setopt($ch, CURLOPT_POST, true);//設定附帶返回header資訊為空白curl_setopt($ch, CURLOPT_HEADER, 0);//post資料curl_setopt($ch, CURLOPT_POSTFIELDS, $data);//cookie儲存檔案位置curl_setopt($ch, CURLOPT_COOKIEJAR, $cookieFile);//設定資料返回作為變數儲存,而不是直接輸出curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);//執行請求$ret = curl_exec($ch);//關閉串連curl_close($ch);//第二步:附帶cookie請求需要登陸的頁面$url = 'http://www.pythontab.com';//curl初始化$ch = curl_init();curl_setopt($ch, CURLOPT_URL, $url);//設定為post請求curl_setopt($ch, CURLOPT_POST, true);//設定附帶返回header資訊為空白curl_setopt($ch, CURLOPT_HEADER, 0);//設定cookie資訊檔位置, 注意與第二步中的擷取不同,這裡是讀取curl_setopt($ch, CURLOPT_COOKIEFILE, $cookieFile);//設定資料返回作為變數儲存,而不是直接輸出curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);//執行請求$ret = curl_exec($ch);//關閉串連curl_close($ch);//列印抓取內容var_dump($ret);

這樣我們就抓取到了需要登陸才能訪問頁面的內容, 注意上面的地址只是一個樣本,需要換成你想要抓取頁面的地址。 這樣我們就可以做到很多事情了, 千萬不要做壞事哦!

  • 聯繫我們

    該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

    如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

    A Free Trial That Lets You Build Big!

    Start building with 50+ products and up to 12 months usage for Elastic Compute Service

    • Sales Support

      1 on 1 presale consultation

    • After-Sales Support

      24/7 Technical Support 6 Free Tickets per Quarter Faster Response

    • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.