採集|程式
最近網上流行著一些採集程式,更多人拿著這些東西在網上叫賣,很多不太懂的人看著那些程式眼羨,其實如果你懂一些ASP,瞭解自動採集程式的原理後,你會感覺實現自動化也是那麼的簡單.
原理及優點:通過XML中的XMLHTTP組件調用其它網站上的網頁,然後批量截取或替換原有的資訊使其轉化成變數後再一一儲存到資料庫中。其主要的優點便是無需再手工添加大量的資訊了,可以指定對某一個站資訊的截取進行批量錄入,達到省時省力的目的。與其單純的ASP小偷程式不同的是:它已經不再依賴其目標網站。
簡單案例:
<% '聲明取得目標資訊的函數,通過XML組件進行實現。 Function GetURL(url) Set Retrieval = CreateObject("Microsoft.XMLHTTP") With Retrieval .Open "GET", url, False .Send GetURL = bytes2bstr(.responsebody) '對取得資訊進行驗證,如果資訊長度小於100則說明截取失敗 if len(.responsebody)<100 then response.write "擷取遠程檔案 <a href="&url&" target=_blank>"&url&"</a> 失敗。" response.end end if
End With Set Retrieval = Nothing End Function ' 二進位轉字串,否則會出現亂碼的! function bytes2bstr(vin) strreturn = "" for i = 1 to lenb(vin) thischarcode = ascb(midb(vin,i,1)) if thischarcode < &h80 then strreturn = strreturn & chr(thischarcode) else nextcharcode = ascb(midb(vin,i+1,1)) strreturn = strreturn & chr(clng(thischarcode) * &h100 + cint(nextcharcode)) i = i + 1 end if next bytes2bstr = strreturn end function '聲明截取的格式,從Start開始截取,到Last為結束 Function GetKey(HTML,Start,Last) filearray=split(HTML,Start) filearray2=split(filearray(1),Last) GetKey=filearray2(0) End Function
Dim Softid,Url,Html,Title
'擷取要取頁面的ID
SoftId=Request("Id")
Url="http://www3.skycn.com/soft/"&SoftId&".html"
Html = GetURL(Url)
'以截取天空軟體的軟體名為例子
Title = GetKey(Html,"<font color='#004FC6' size='3'>","</font></b></td></tr>")
'開啟資料庫,準備入庫
dim connstr,conn,rs,sql
connstr="DBQ="+server.mappath("db1.mdb")+";DefaultDir=;DRIVER={Microsoft Access Driver (*.mdb)};"
set conn=server.createobject("ADODB.CONNECTION")
conn.open connstr
set rs=server.createobject("adodb.recordset")
sql="select [列名] from [表名] where [列名]='"&Title&"'"
rs.open sql,conn,3,3
if rs.eof and rs.bof then
rs("列名")=Title
rs.update
set rs=nothing
end if
set rs=nothing
Response.Write"採集完畢!"
%> |