python爬蟲 selenium+phantomjs動態解析網頁,載入頁面成功,返回空資料

來源:互聯網
上載者:User

標籤:png   自己   網頁   頭部   動態載入   設定   技術   電腦   image   

廢話不多說,直接說重點:

剛開始做的時候,代理IP,頭部資訊池,都已經做好了,使用selenium+phantomjs擷取js動態載入後的源碼

起初挺好的,能出來動態載入後的源碼,但是運行了幾次之後,電腦有點卡頓(估計是運存太小),源碼就擷取不到了,返回的資料

都是空資料,以至雩都是出錯

在做的時候一定要給頁面載入之前做一個延時,以保證頁面的正常載入出來,這樣我們才能擷取導資料

我在載入前後都做了延時等待,當然,我這個就是說這個意思,沒必要仿照

可以根據自己的需求進行設定,然後源碼就載入出來了,就是有點慢!

python爬蟲 selenium+phantomjs動態解析網頁,載入頁面成功,返回空資料

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.