正則方式的自動小偷抓網程式

來源:互聯網
上載者:User

有一些瑕疵沒時間細化,只是實現了效果,大家看一看這個正則該怎麼寫好:
URL:http://news.szhome.com/83642.html
內容: 複製代碼 代碼如下:object></div></div>
</div>

<div class="share"><div class="linkshare" style="right: 0">

這兩個標記之間的代碼。END標記的問題解決了,但是鬱悶的是START截取的標記因為第二個DIV和第三個中間有換行,我無語了不知道怎麼處理這個正則。
而且鬱悶的是有多處有這種重複型標記,對正則不太熟悉,我的解決方案如下:

複製代碼 代碼如下:MatchCollection mc = Regex.Matches(ghoPage.Trim(), @"(?<=<div class=['""]txtmsg['""]>)[\s\S]*?(?=<div class=['""]share['""]><div class=)", RegexOptions.CultureInvariant | RegexOptions.IgnoreCase);
foreach (Match mm in mc)
{
sb.Append(mc[0].Value.Substring(1933, mc[0].Value.Length - 1933));
}

我算出截取出來多處兩個FLASH廣告DIV的長度是1933,然後處理字串截取後得到我想要的文本,這樣做的劣勢就是萬一該站改變了兩個FLASH廣告DIV的長度我擷取的資料就不是完整的呢,有興趣的研究下,看看換行的DIV正則問題怎麼處理。
裡面用到了自己寫的一個BUTTON控制項,可以在點擊後禁止重複點擊,然後就是一些判斷,在思路上蠻不錯,可以做到一直抓取,因為不經常用就沒做成WINDOWS服務類型,這樣的程式可以做成WINDOWS服務,把規則寫在INI檔案中,抓錄的規則和正則也放在設定檔中,這樣就能實現自動抓錄。

很短的代碼,對這種抓錄有興趣的朋友可以嘗試下。下載

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.