Golang MySQL LOAD DATA LOCAL INFILE 使用

這是一個建立於 的文章，其中的資訊可能已經有所發展或是發生改變。

在往 MySQL 寫入大量資料時直接 insert 效率太低，應該使用 MySQL 的 LOAD DATA LOCAL INFILE。

Golang 的 MySQL 驅動 https://github.com/go-sql-driver/mysql 支援這個用法，有用到的朋友可以參考如下代碼：

db, err := sql.Open("mysql", conf.DB)byts := &bytes.Buffer{}for _, pv := range stat {line := strings.Join([]string{"field1-data", "field2-data"}, "\x1F")byts.WriteString(line)byts.WriteString("\x1E")}mysql.RegisterReaderHandler("data", func() io.Reader {return io.Reader(byts)})_, err = db.Exec(`LOAD DATA LOCAL INFILE 'Reader::data' INTO TABLE t_pvlogs CHARACTER SET UTF8     FIELDS TERMINATED BY X'1F'    LINES TERMINATED BY X'1E'(field1, field2);`)if err != nil {fmt.Println(err)return}err = db.Close()if err != nil {fmt.Println(err)return}

其中：

• 在 import 包的時候不要用 _，因為要直接使用 mysql 包
• 設定了欄位分隔符號為 \x1F，行分隔字元為 \x1E

---- EOF ----