telnet建立http串連擷取網頁HTML內容

標籤：style   http   io   ar   color   os   使用   sp   on   

利用telnet可以與伺服器建立http串連，擷取網頁，實現瀏覽器的功能。 
它對於需要對http header進行觀察和測試到時候非常方便。因為瀏覽器看不到http header。 
步驟如下： 
telnet www.csua.berkeley.edu 80 
輸入GET /officers.html HTTP/1.0 並2次斷行符號。 
這時就應該可以看到http response了，包括了header和body。 
因為window自己帶到telnet在輸入內容的時候看不到輸入的內容，可以下載putty並選用raw tcp connection的方式進行串連。 

需要注意到事情如下： 
1. GET 和 HTTP必須大寫，因為很多伺服器要求大寫，小寫話在一些伺服器會造成串連失敗。 

2. HTTP1.1的話，還需要加上一行寫明host, 這是http1.1的要求。 
GET /officers.html HTTP/1.1 
host: www.csua.berkeley.ed 

此處加host的另一個原因是因為很多網站是採用虛擬機器主機的形式，host用來區別於同一主機的其他虛擬機器主機所必須的。 

3. 2次斷行符號表示把request發出去，因為http request是以最後一行為空白行來表示結束的。 

4. 一些比較聰明的網站會屏蔽掉不是瀏覽器的http request， 這時我們就需要假扮瀏覽器，需要set的User-agent。 
GET /officers.html HTTP/1.1 
host: www.csua.berkeley.ed 
User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9.0.5) Gecko/2008120122 Firefox/3.0.5 

5. 抓取http串連的package可以使用Wireshark，擷取瀏覽器的http request和response，再用telnet類比瀏覽器進行串連。 

telnet建立http串連擷取網頁HTML內容