MySql – 最佳化Insert

來源:互聯網
上載者:User
鎖定表可以加速用多個語句執行的INSERT操作:

  • LOCK TABLES a WRITE;
  • INSERT INTO a VALUES (1,23),(2,34),(4,33);
  • INSERT INTO a VALUES (8,26),(6,29);
  • UNLOCK TABLES;

這樣效能會提高,因為索引緩衝區僅在所有INSERT陳述式完成後重新整理到磁碟上一次。一般有多少INSERT語句即有多少索引緩衝區重新整理。如果能用一個語句插入所有的行,就不需要鎖定。

對於事務表,應使用BEGIN和COMMIT代替LOCK TABLES來加快插入。

 

 1. 對於Myisam 類型的表,可以通過以下方式快速的匯入大量的資料。
ALTER TABLE tblname DISABLE KEYS;
loading the data
ALTER TABLE tblname ENABLE KEYS;
這兩個命令用來開啟或者關閉Myisam 表非唯一索引的更新。在匯入大量的資料到一
個非空的Myisam 表時,通過設定這兩個命令,可以提高匯入的效率。對於匯入大量
資料到一個空的Myisam 表,預設就是先匯入資料然後才建立索引的,所以不用進行
設定。
2. 而對於Innodb 類型的表,這種方式並不能提高匯入資料的效率。對於Innodb 類型
的表,我們有以下幾種方式可以提高匯入的效率:
a. 因為Innodb 類型的表是按照主鍵的順序儲存的,所以將匯入的資料按照主鍵的順
序排列,可以有效提高匯入資料的效率。如果Innodb 表沒有主鍵,那麼系統會預設
建立一個內部列作為主鍵,所以如果可以給表建立一個主鍵,將可以利用這個優勢提高
匯入資料的效率。
b. 在匯入資料前執行SET UNIQUE_CHECKS=0,關閉唯一性校正,在匯入結束後執行SET
UNIQUE_CHECKS=1,恢複唯一性校正,可以提高匯入的效率。
c. 如果應用使用自動認可的方式,建議在匯入前執行SET AUTOCOMMIT=0,關閉自動
提交,匯入結束後再執行SET AUTOCOMMIT=1,開啟自動認可,也可以提高匯入的效率。
11.4.2 最佳化insert語句:
3. 如果你同時從同一客戶插入很多行,使用多個值表的INSERT 語句。這比使用分開INSERT 語句快(在一些情況中幾倍)。
Insert into test values(1,2),(1,3),(1,4)…
4. 如果你從不同客戶插入很多行,能通過使用INSERT DELAYED 語句得到更高的速度。
Delayed 的含義是讓insert 語句馬上執行,其實資料都被放在記憶體的隊列中,並
沒有真正寫入磁碟;這比每條語句分別插入要快的多;LOW_PRIORITY 剛好相反,
在所有其他使用者對錶的讀寫完後才進行插入;
5. 將索引檔案和資料檔案分在不同的磁碟上存放(利用建表中的選項);
6. 如果進行批量插入,可以增加bulk_insert_buffer_size 變數值的方法來提高速
度,但是,這隻能對myisam 表使用;
7. 當從一個文字檔裝載一個表時,使用LOAD DATA INFILE。這通常比使用很多
INSERT 語句快20 倍;
8. 根據應用情況使用replace 語句代替insert;
9. 根據應用情況使用ignore 關鍵字忽略重複記錄。

 

多個表union之後插入快,還是鎖定表插入每個錶快?是不是和記憶體和bulk_insert_size有關?需要測試一下。

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.