連續的分頁採集問題

目標網站：http://news.xinhuanet.com/photo/2015-01/29/c_127433852.htm
擷取內容：本文圖片和文字說明；
本人實現方法：
因為分頁地址是連續的，我是在目標地址上做迴圈

http://news.xinhuanet.com/photo/2015-01/29/c_127433852_2.htm

用get_headers訪問後 擷取返回是否為200，是的話進行內容抓取
1、curl擷取當前地址html後，截取所需內容
2、_2這個就是變數，自增後繼續判斷下一頁是否可以訪問，可以訪問就繼續採集

以上是可以實現採集抓取的，但是好像速度很慢，而且每次都是curl去抓取對伺服器貌似也有壓力

問題：如何改進，大家是如何用php做的抓取，求思路和方向

回複內容：

目標網站：http://news.xinhuanet.com/photo/2015-01/29/c_127433852.htm
擷取內容：本文圖片和文字說明；
本人實現方法：
因為分頁地址是連續的，我是在目標地址上做迴圈

http://news.xinhuanet.com/photo/2015-01/29/c_127433852_2.htm

用get_headers訪問後 擷取返回是否為200，是的話進行內容抓取
1、curl擷取當前地址html後，截取所需內容
2、_2這個就是變數，自增後繼續判斷下一頁是否可以訪問，可以訪問就繼續採集

以上是可以實現採集抓取的，但是好像速度很慢，而且每次都是curl去抓取對伺服器貌似也有壓力

問題：如何改進，大家是如何用php做的抓取，求思路和方向

下面不是有分頁麼，直接擷取裡面的連結存到數組抓吧

1. 直接抓取，抓取返回結果的時候就先判斷狀態代碼是否為200
2. Curl並發

