Php CURL類比登陸論壇並採集資料執行個體

要類比瀏覽器訪問網站，首選要學會觀察瀏覽器是如何發送http報文的，以及網站伺服器返回給瀏覽器 是什麼樣的內容。我推薦安裝一個國外人開發的httpwatch的軟體，最好搞個破解的版本，否則有些功能是使用不了的。這個軟體安裝完成之後是嵌入在 IE裡的，啟動Record，在地址欄輸入網址後斷行符號，它就會將瀏覽器和伺服器之間的所有通訊掃描出來，讓你一覽無遺。關於這個軟體的使用在本文不做介 紹。

類比瀏覽器登陸應用開發，最關鍵的地方是突破登陸驗證。CURL技術不只支援http，還支援https。區別就在多了一層SSL加密傳輸。如果是要登陸 https網站，php記得要支援openssl。還是先拿一個例子來分析。

代碼如下

複製代碼

<?php $discuz_url = 'http://127.0.0.1/discuz/'; //論壇地址 $login_url = $discuz_url . 'logging.php?action=login'; //登入頁地址 $post_fields = array(); //以下兩項不需要修改 $post_fields['loginfield'] = 'username'; $post_fields['loginsubmit'] = 'true'; //使用者名稱和密碼，必須填寫 $post_fields['username'] = 'tianxin'; $post_fields['password'] = '111111'; //安全提問 $post_fields['questionid'] = 0; $post_fields['answer'] = ''; //@todo驗證碼 $post_fields['seccodeverify'] = ''; //擷取表單FORMHASH $ch = curl_init($login_url); curl_setopt($ch, CURLOPT_HEADER, 0); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); $contents = curl_exec($ch); curl_close($ch); preg_match('/<inputs*type="hidden"s*name="formhash"s*value="(.*?)"s*/>/i', $contents, $matches); if (!empty($matches)) {     $formhash = $matches[1]; } else {     die('Not found the forumhash.'); } //POST資料，擷取COOKIE,cookie檔案放在網站的temp目錄下 $cookie_file = tempnam('./temp', 'cookie'); $ch = curl_init($login_url); curl_setopt($ch, CURLOPT_HEADER, 0); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt($ch, CURLOPT_POST, 1); curl_setopt($ch, CURLOPT_POSTFIELDS, $post_fields); curl_setopt($ch, CURLOPT_COOKIEJAR, $cookie_file); curl_exec($ch); curl_close($ch); //取到了關鍵的cookie檔案就可以帶著cookie檔案去類比發帖,fid為論壇的欄目ID $send_url = $discuz_url . "post.php?action=newthread&fid=2"; $ch = curl_init($send_url); curl_setopt($ch, CURLOPT_HEADER, 0); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file); $contents = curl_exec($ch); curl_close($ch); //這裡的hash碼和登陸視窗的hash碼的正則不太一樣，這裡的hidden多了一個id屬性 preg_match('/<inputs*type="hidden"s*name="formhash"s*id="formhash"s*value="(.*?)"s*/>/i', $contents, $matches); if (!empty($matches)) {     $formhash = $matches[1]; } else {     die('Not found the forumhash.'); } $post_data = array(); //文章標題 $post_data['subject'] = 'test2'; //文章內容 $post_data['message'] = 'test2'; $post_data['topicsubmit'] = "yes"; $post_data['extra'] = ''; //文章標籤 $post_data['tags'] = 'test'; //文章的hash碼，這個非常關鍵！假如缺少這個hash碼，discuz會警告你來路的頁面不正確 $post_data['formhash'] = $formhash; $ch = curl_init($send_url); curl_setopt($ch, CURLOPT_REFERER, $send_url);       //偽裝REFERER curl_setopt($ch, CURLOPT_HEADER, 0); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 0); curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file); curl_setopt($ch, CURLOPT_POST, 1); curl_setopt($ch, CURLOPT_POSTFIELDS, $post_data); $contents = curl_exec($ch); curl_close($ch); //清理cookie檔案 unlink($cookie_file); ?>

CURL實現網站類比登陸

代碼如下

複製代碼

<?php$cookie_file=tempnam('./temp','cookie');$login_url='/bbs/logging.php?action=login&amp;loginsubmit=yes';$post_fields='username=使用者名稱&password=使用者密碼&referer=index.php&formhash=24eca8af&loginfield=username&questionid=0&loginsubmit=登入';$ch = curl_init($login_url);curl_setopt($ch,CURLOPT_HEADER,0);curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);curl_setopt($ch,CURLOPT_POST,1);curl_setopt($ch,CURLOPT_POSTFIELDS,$post_fields);curl_setopt($ch,CURLOPT_COOKIEJAR,$cookie_file);curl_exec($ch);curl_close($ch);$url='/bbs';$ch =curl_init($url);curl_setopt($ch,CURLOPT_HEADER,0);curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);curl_setopt($ch,CURLOPT_COOKIEFILE,$cookie_file);$contents=curl_exec($ch);echo $contents;curl_close($ch);?>