昨天晚上群裡有朋友採集網頁時發現file_get_contents 獲得的網頁儲存到本地為亂碼,響應的header 裡 Content-Encoding:gzip
但在瀏覽器裡看是正常的。
因為我有過相關經驗馬上發現是網站開啟了gzip而file_get_contents 獲得的是壓縮過的頁面,而不是解壓過的頁面(不知道是不是要file_get_conttents 請求網頁時帶上相應的參數,直接獲得沒有被gzip壓縮過的網頁?)
剛好我前不久剛看到可以用讀取檔案的前2個位元組判斷檔案類型。群裡面的朋友也說gzip壓縮過的網頁(gbk編碼)前2位元組是 1F 8B 於是就可以判斷網頁是否gzip壓縮過。
代碼如下:
複製代碼 代碼如下:
//米爾軍事網採用 gzip壓縮網頁
//file_get_contents 直接獲得的網頁是亂碼。
header('Content-Type:text/html;charset=utf-8' );
$url = 'http://www.miercn.com';
$file = fopen($url, "rb");
//唯讀2位元組 如果為(16進位)1f 8b (10進位)31 139則開啟了gzip ;
$bin = fread($file, 2);
fclose($file);
$strInfo = @unpack("C2chars", $bin);
$typeCode = intval($strInfo['chars1'].$strInfo['chars2']);
$isGzip = 0;
switch ($typeCode)
{
case 31139:
//網站開啟了gzip
$isGzip = 1;
break;
default:
$isGzip = 0;
}
$url = $isGzip ? "compress.zlib://".$url:$url; // 三元運算式
$mierHtml = file_get_contents($url); //獲得米爾軍事網資料
$mierHtml = iconv("gbk","utf-8",$mierHtml);
echo $mierHtml;
http://www.bkjia.com/PHPjc/327839.htmlwww.bkjia.comtruehttp://www.bkjia.com/PHPjc/327839.htmlTechArticle昨天晚上群裡有朋友採集網頁時發現file_get_contents 獲得的網頁儲存到本地為亂碼,響應的header 裡 Content-Encoding:gzip 但在瀏覽器裡看是正常的。...