Python爬蟲系列:判斷目標網頁編碼的幾種方法

來源:互聯網
上載者:User

標籤:abd   python爬蟲   AC   iad   結構   區別   英文   內容   action   

在爬取網頁內容時,瞭解目標網站所用編碼是非常重要的,本文介紹幾種常用的方法,並使用幾個網站進行簡單測試。

代碼運行結果:

從不同國家的幾個網站測試結果來看,utf8使用的較多(對於純英文網站,用什麼方式解碼沒有本質區別)。但方法3和4成功率更高一些,不過速度略慢,比較好的方法是組合使用這幾個方法,結合異常處理結構,優先使用方法1或2,實在不行再使用後面的方法。http://www.aibbt.com/a/18106.html

收  藏

Python爬蟲系列:判斷目標網頁編碼的幾種方法

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.