淺談ASP自動採集程式及入庫

來源:互聯網
上載者:User
採集|程式 最近網上流行著一些採集程式,更多人拿著這些東西在網上叫賣,很多不太懂的人看著那些程式眼羨,其實如果你懂一些ASP,瞭解自動採集程式的原理後,你會感覺實現自動化也是那麼的簡單.
原理及優點:通過XML中的XMLHTTP組件調用其它網站上的網頁,然後批量截取或替換原有的資訊使其轉化成變數後再一一儲存到資料庫中。其主要的優點便是無需再手工添加大量的資訊了,可以指定對某一個站資訊的截取進行批量錄入,達到省時省力的目的。與其單純的ASP小偷程式不同的是:它已經不再依賴其目標網站。
簡單案例:
 1<%
 2'聲明取得目標資訊的函數,通過XML組件進行實現。
 3Function GetURL(url) 
 4Set Retrieval = CreateObject("Microsoft.XMLHTTP") 
 5With Retrieval 
 6.Open "GET", url, False
 7.Send 
 8GetURL = bytes2bstr(.responsebody)
 9'對取得資訊進行驗證,如果資訊長度小於100則說明截取失敗
10if len(.responsebody)<100 then
11response.write "擷取遠程檔案 <a href="&url&" target=_blank>"&url&"</a> 失敗。"
12response.end
13end if
14
15End With 
16Set Retrieval = Nothing 
17End Function
18' 二進位轉字串,否則會出現亂碼的!
19function bytes2bstr(vin) 
20strreturn = "" 
21for i = 1 to lenb(vin) 
22thischarcode = ascb(midb(vin,i,1)) 
23if thischarcode < &h80 then 
24strreturn = strreturn & chr(thischarcode) 
25else 
26nextcharcode = ascb(midb(vin,i+1,1)) 
27strreturn = strreturn & chr(clng(thischarcode) * &h100 + cint(nextcharcode)) 
28i = i + 1 
29end if 
30next 
31bytes2bstr = strreturn 
32end function 
33'聲明截取的格式,從Start開始截取,到Last為結束
34Function GetKey(HTML,Start,Last)
35filearray=split(HTML,Start)
36filearray2=split(filearray(1),Last)
37GetKey=filearray2(0)
38End Function
39
40Dim Softid,Url,Html,Title 
41
42'擷取要取頁面的ID
43
44SoftId=Request("Id")
45
46  Url="http://www3.skycn.com/soft/"&SoftId&".html" 
47
48  Html = GetURL(Url) 
49
50'以截取天空軟體的軟體名為例子
51
52  Title = GetKey(Html,"<font color='#004FC6' size='3'>","</font></b></td></tr>")
53
54'開啟資料庫,準備入庫
55
56dim connstr,conn,rs,sql
57
58connstr="DBQ="+server.mappath("db1.mdb")+";DefaultDir=;DRIVER={Microsoft Access Driver (*.mdb)};"
59
60set conn=server.createobject("ADODB.CONNECTION")
61
62conn.open connstr
63
64set rs=server.createobject("adodb.recordset")
65
66sql="select [列名] from [表名] where [列名]='"&Title&"'"
67
68rs.open sql,conn,3,3
69
70if rs.eof and rs.bof then 
71
72rs("列名")=Title
73
74rs.update 
75
76set rs=nothing
77
78end if
79
80set rs=nothing
81
82Response.Write"採集完畢!"
83
84%>

相關文章

Beyond APAC's No.1 Cloud

19.6% IaaS Market Share in Asia Pacific - Gartner IT Service report, 2018

Learn more >

Apsara Conference 2019

The Rise of Data Intelligence, September 25th - 27th, Hangzhou, China

Learn more >

Alibaba Cloud Free Trial

Learn and experience the power of Alibaba Cloud with a free trial worth $300-1200 USD

Learn more >

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。