PHP 使用curl抓取啟用了viewstate的網站問題

來源:互聯網
上載者:User
請問此類網站抓取內容時,和沒開啟viewstate有何區別?
現在是不清楚抓取開啟viewstate的網站的正確步驟,請大神指導

回複內容:

請問此類網站抓取內容時,和沒開啟viewstate有何區別?
現在是不清楚抓取開啟viewstate的網站的正確步驟,請大神指導

正好做過這個,我來說說我的解決辦法。

首先,你需要明白你要做什麼,告訴伺服器你的身份,許多ASP.NET都會有_viewstate這個超長的字串。它在伺服器端會進行驗證.那麼,你在構造request的時候,必須獲得這個viewstate。其實很簡單:
1 首先請求url,儲存cookie,此時你能拿到這個page的data,用正則匹配到hidden的viewstate儲存。
2 攜帶cookie請求驗證碼(如果有),拿到後解析驗證碼(人工或者機器識別)
3 攜帶cookie和登陸憑據類比登陸

記住一點,viewstate是對同一個cookie有效,也就是說,你如果在網頁開啟,copy下來那個字串的,它將仍舊無法工作,除非你連同cookie都copy下來。

需要注意的是,有些參數是js自動產生的,譬如我遇到的,講驗證碼用某個js加密後,作為一個hidden,你在普通的抓取回來的page裡面,無法看到,這時候,你得自己實現這個加密過程。保證在同一個cookie的環境下,把伺服器需要的所有資料全部提供就可以成功!

  • 相關文章

    聯繫我們

    該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

    如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

    A Free Trial That Lets You Build Big!

    Start building with 50+ products and up to 12 months usage for Elastic Compute Service

    • Sales Support

      1 on 1 presale consultation

    • After-Sales Support

      24/7 Technical Support 6 Free Tickets per Quarter Faster Response

    • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.