MySQL 大資料量快速插入方法和語句最佳化分享

來源:互聯網
上載者:User

鎖定也將降低多串連測試的整體時間,儘管因為它們等候鎖定最大等待時間將上升。例如:

複製代碼 代碼如下:Connection 1 does 1000 inserts
Connections 2, 3, and 4 do 1 insert
Connection 5 does 1000 inserts

  如果不使用鎖定,2、3和4將在1和5前完成。如果使用鎖定,2、3和4將可能不在1或5前完成,但是整體時間應該快大約40%。

  INSERT、UPDATE和DELETE操作在MySQL中是很快的,通過為在一行中多於大約5次連續不斷地插入或更新的操作加鎖,可以獲得更好的整體效能。如果在一行中進行多次插入,可以執行LOCK TABLES,隨後立即執行UNLOCK TABLES(大約每1000行)以允許其它的線程訪問表。這也會獲得好的效能。

  INSERT裝載資料比LOAD DATA INFILE要慢得多,即使是使用上述的策略。

  為了對LOAD DATA INFILE和INSERT在MyISAM表得到更快的速度,通過增加key_buffer_size系統變數來擴大 鍵高速緩衝區。

  INSERT文法

複製代碼 代碼如下:INSERT [LOW_PRIORITY | DELAYED | HIGH_PRIORITY] [IGNORE]
[INTO] tbl_name [(col_name,...)]
VALUES ({expr | DEFAULT},...),(...),...
[ ON DUPLICATE KEY UPDATE col_name=expr, ... ]

  或:

複製代碼 代碼如下:

INSERT [LOW_PRIORITY | DELAYED | HIGH_PRIORITY] [IGNORE]
[INTO] tbl_name
SET col_name={expr | DEFAULT}, ...
[ ON DUPLICATE KEY UPDATE col_name=expr, ... ]

  或:

複製代碼 代碼如下: 
INSERT [LOW_PRIORITY | HIGH_PRIORITY] [IGNORE]
[INTO] tbl_name [(col_name,...)]
SELECT ...
[ ON DUPLICATE KEY UPDATE col_name=expr, ... ]

  一、DELAYED 的使用

  使用延遲插入操作DELAYED調節符應用於INSERT和REPLACE語句。當DELAYED插入操作到達的時候,伺服器把資料行放入一個隊列中,並立即給用戶端返回一個狀態資訊,這樣用戶端就可以在資料表被真正地插入記錄之前繼續進行操作了。如果讀取者從該資料表中讀取資料,隊列中的資料就會被保持著,直到沒有讀取者為止。

  接著伺服器開始插入延遲資料行(delayed-row)隊列中的資料行。在插入操作的同時,伺服器還要檢查是否有新的讀取請求到達和等待。如果有,延遲資料行隊列就被掛起,允許讀取者繼續操作。當沒有讀取者的時候,伺服器再次開始插入延遲的資料行。這個過程一直進行,直到隊列空了為止。

  幾點要注意事項:

  INSERT DELAYED應該僅用於指定值清單的INSERT語句。伺服器忽略用於INSERT DELAYED...SELECT語句的DELAYED。伺服器忽略用於INSERT DELAYED...ON DUPLICATE UPDATE語句的DELAYED。

  因為在行被插入前,語句立刻返回,所以您不能使用LAST_INSERT_ID()來擷取AUTO_INCREMENT值。AUTO_INCREMENT值可能由語句產生。

  對於SELECT語句,DELAYED行不可見,直到這些行確實被插入了為止。

  DELAYED在從屬複製伺服器中被忽略了,因為DELAYED不會在從屬伺服器中產生與主伺服器不一樣的資料。注意,目前在隊列中的各行只儲存在儲存空間中,直到它們被插入到表中為止。這意味著,如果您強行中止了mysqld(例如,使用kill -9)或者如果mysqld意外停止,則所有沒有被寫入磁碟的行都會丟失。

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.