都說php採摘很耗費伺服器資源,哪個過程最耗伺服器資源呢

來源:互聯網
上載者:User
都說php採集很耗費伺服器資源,哪個過程最耗伺服器資源呢?
最近在研究php採集程式

採集過程就是擷取資料,再處理資料,最後入庫

個人覺得排除重複資料入庫最耗費伺服器資源,大家覺得呢??

------解決方案--------------------
樓主這個問題,幾乎可以肯定不會有明確唯一的答案。跟具體的業務內容有關。採集時的網路流量、採到資料後的處理、寫資料庫、甚至儲存容量,都可能成為瓶頸。

我做過的一個抓網頁的程式,也算是採集吧,並發百八十個 HTTP Request 就把網路擁爆了。


――――――――――――――――――――――――――――――――
基於CSDN論壇提供的外掛程式擴充功能,自己做了個簽名檔工具,分享給大家,歡迎技術交流 :)
------解決方案--------------------
偷資料下來費網路資源
分析資料費系統資源
------解決方案--------------------
採集別人的頁面要佔很大網路
分析匹配檔案佔用系統資源
寫入資料庫~ 你懂的
------解決方案--------------------
file_get_contents function會很耗網路資源,
preg_match_all and preg_replace function 耗CPU資源,而且不是一般的耗CPU,你自己可以去類比計算時間
  • 聯繫我們

    該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

    如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

    A Free Trial That Lets You Build Big!

    Start building with 50+ products and up to 12 months usage for Elastic Compute Service

    • Sales Support

      1 on 1 presale consultation

    • After-Sales Support

      24/7 Technical Support 6 Free Tickets per Quarter Faster Response

    • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.