PHP大批量插入資料庫的3種方法和速度對比,php資料庫3種_PHP教程

來源:互聯網
上載者:User

PHP大批量插入資料庫的3種方法和速度對比,php資料庫3種


第一種方法:使用insert into 插入,代碼如下:

$params = array(‘value'=>'50′);set_time_limit(0);echo date(“H:i:s”);for($i=0;$i<2000000;$i++){$connect_mysql->insert($params);};echo date(“H:i:s”);

最後顯示為:23:25:05 01:32:05 也就是花了2個小時多!

第二種方法:使用事務提交,批量插入資料庫(每隔10W條提交下)最後顯示消耗的時間為:22:56:13 23:04:00 ,一共8分13秒 ,代碼如下:

echo date(“H:i:s”);$connect_mysql->query(‘BEGIN');$params = array(‘value'=>'50′);for($i=0;$i<2000000;$i++){$connect_mysql->insert($params);if($i%100000==0){$connect_mysql->query(‘COMMIT');$connect_mysql->query(‘BEGIN');}}$connect_mysql->query(‘COMMIT');echo date(“H:i:s”);

第三種方法:使用最佳化SQL語句:將SQL語句進行拼接,使用 insert into table () values (),(),(),()然後再一次性插入,如果字串太長,

則需要配置下MYSQL,在mysql 命令列中運行 :set global max_allowed_packet = 2*1024*1024*10;消耗時間為:11:24:06 11:25:06;

插入200W條測試資料僅僅用了1分鐘!代碼如下:

$sql= “insert into twenty_million (value) values”;for($i=0;$i<2000000;$i++){$sql.=”('50′),”;};$sql = substr($sql,0,strlen($sql)-1);$connect_mysql->query($sql);

最後總結下,在插入大批量資料時,第一種方法無疑是最差勁的,而第二種方法在實際應用中就比較廣泛,第三種方法在插入測試資料或者其他低要求時比較合適,速度確實快。


php 大量向mysql資料庫插入資料最快的方法

一次性插入1000條資料比一條一條的插入速度會提升N倍,主要技巧就是在寫SQL的上面,沒啥難度
insert into table1 value (v1, v2, v3), (x1,x2,x3),....

而不是
insert into table1 value (v1, v2, v3);
insert into table1 value (x1,x2,x3);
這樣一條一條的插入
希望你能明白
參考資料:牛人小海
 

php,mysql,大批量的excel資料怎匯入資料庫?之前我錄資料也是這種方式,先轉化成cs

關於csv格式
如果內容中有逗號,可以把整個欄位用引號括起來,具體可參考百度百科csv。
例如
欄位1,“欄位2帶,號”,欄位3

其實,關鍵在於php讀取csv的規則,csv並不是一定要用逗號,也可以是分號等其他符號。
改一下對應的php讀取規則即可。
 

http://www.bkjia.com/PHPjc/840763.htmlwww.bkjia.comtruehttp://www.bkjia.com/PHPjc/840763.htmlTechArticlePHP大批量插入資料庫的3種方法和速度對比,php資料庫3種 第一種方法: 使用insert into 插入,代碼如下: $params = array(‘value'='50′);set_time_...

  • 聯繫我們

    該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

    如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

    A Free Trial That Lets You Build Big!

    Start building with 50+ products and up to 12 months usage for Elastic Compute Service

    • Sales Support

      1 on 1 presale consultation

    • After-Sales Support

      24/7 Technical Support 6 Free Tickets per Quarter Faster Response

    • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.