正則-智能建立網址列表程式意外停止但不出現錯誤？

正則php諮詢

最近想用PHP寫一個收集站內網址列表的程式，如果要是為每個獨立的網站都配置單獨的規則程式就顯得不夠智能，所以想一次性寫一個智能點的，我的思路是，程式從一個入口進入“www.xxx.com”後用FILE_GET_CONTENT 或CURL擷取該頁的HTML，然後通過正則分析出所有的連結儲存到數組中。

這個時候問題就出現了，因為HTML寫法問題，會出現很多情況，下面舉例說明。

標題
標題
標題
標題
標題
標題
標題

等等吧，還有很多情況就不逐一寫出來了，由於FILE_GET_CONTENT是必須能夠訪問到該頁面才可以返回HTML，但是如果在訪問之前不處理的話，就會出現無法訪問被跳過的現象，於是我就根據一定情況對上述地址進行拼接使其能夠被訪問到。

但是我寫出的程式依舊不能解決所有問題，而且現在會出現程式沒執行完畢就停了，程式不報任何錯誤，好像結束了一樣。

想賴諮詢一下，大家有沒有什麼好的方法去匹配所有情況，因為網址拼接這塊是個重點，如果不能有效拼接就無法抓取更多網址，但是通常的拼接不能解決所有情況。

希望大家給予指導。

