利用SqlBulkCopy快速大量匯入資料

來源:互聯網
上載者:User

 一個比較好的解決方案,就是採用SqlBulkCopy來處理儲存資料。SqlBulkCopy儲存大批量的資料非常的高效,就像這個方法的名字一樣,可以將記憶體中的資料表直接的一次性的儲存到資料庫中,而不需要一次一次的向資料庫Insert資料。初次實驗,百萬層級的資料表,也只需幾秒時間內就可以完全的存入資料庫中,其速度,比傳統的Insert方法不止快很多倍。下面,我將用代碼,介紹其用法。
/// <summary>
        /// LaborReport Data Import To Database
        /// </summary>
        /// <param name="laborReport">laborReport data table</param>
        /// <param name="laborReportDetail">laborReportDetail data table</param>
        public void LaborReportInsert(DataTable laborReport, DataTable laborReportDetail)
        {
            using (SqlConnection conn = new SqlConnection(this.Connection))
            {
                if (conn.State != ConnectionState.Open)
                    conn.Open();           
                using (SqlBulkCopy sqlBCLaborReport = new SqlBulkCopy(conn))
                {
                    sqlBCLaborReport.BatchSize = laborReport.Rows.Count;
                    sqlBCLaborReport.BulkCopyTimeout = 60;
                    sqlBCLaborReport.DestinationTableName = "LaborReport";
                    sqlBCLaborReport.WriteToServer(laborReport);
                }
                using (SqlBulkCopy sqlBCLaborReportDetails = new SqlBulkCopy(conn))
                {
                    sqlBCLaborReportDetails.BatchSize = laborReportDetail.Rows.Count;
                    sqlBCLaborReportDetails.BulkCopyTimeout = 60;
                    sqlBCLaborReportDetails.DestinationTableName = "LaborReportDetails";
                    sqlBCLaborReportDetails.WriteToServer(laborReportDetail);
                }
                if (conn.State != ConnectionState.Closed)
                    conn.Close();
            }
        }
      上邊的範例程式碼,將記憶體中的兩個DataTable 資料一次性的存入資料庫中,只要記憶體中的資料表格的結構跟資料庫中的表格結構一樣,就可以了,如果資料庫中包含自增欄欄位,我們可以不需要在記憶體表中定義,當資料儲存到資料庫中的時候,自增列會自動產生資料的。

 

//資料大量匯入sqlserver,建立執行個體  
               System.Data.SqlClient.SqlBulkCopy sqlbulk = new System.Data.SqlClient.SqlBulkCopy(System.Configuration.ConfigurationManager.ConnectionStrings["connstr"].ToString());  

               // 目標資料庫表 名  
               sqlbulk.DestinationTableName = "tablename";  
               // 資料集欄位索 引與資料庫欄位索引映射  
               sqlbulk.ColumnMappings.Add(0, 5);  
              sqlbulk.ColumnMappings.Add(1, 4);  
               sqlbulk.ColumnMappings.Add(2, 7);  
               sqlbulk.ColumnMappings.Add(3, 1);  
               sqlbulk.ColumnMappings.Add(4, 10);  
               sqlbulk.ColumnMappings.Add(5, 6);  
               sqlbulk.ColumnMappings.Add(6, 2);  
               // 匯入  
               sqlbulk.WriteToServer(sqldb);  
               sqlbulk.Close();  

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.