sqlserver bcp(資料匯入匯出工具)一般用法與命令詳解

來源:互聯網
上載者:User

bcp是SQL Server中負責匯入匯出資料的一個命令列工具,它是基於DB-Library的,並且能以並行的方式高效地匯入匯出大批量的資料。bcp可以將資料庫的表或視圖直接匯出,也能通過SELECT FROM語句對錶或視圖進行過濾後匯出。在匯入匯出資料時,可以使用預設值或是使用一個格式檔案將檔案中的資料匯入到資料庫或將資料庫中的資料匯出到檔案中。下面將詳細討論如何利用bcp匯入匯出資料。

1. bcp的主要參數介紹

bcp共有四個動作可以選擇。
(1) 匯入。
這個動作使用in命令完成,後面跟需要匯入的檔案名稱。
(2) 匯出。
這個動作使用out命令完成,後面跟需要匯出的檔案名稱。
(3) 使用SQL語句匯出。
這個動作使用queryout命令完成,它跟out類似,只是資料來源不是表或視圖名,而是SQL語句。
(4) 匯出格式檔案。
這個動作使用format命令完成,後而跟格式檔案名稱。
下面介紹一些常用的選項:
-f format_file
format_file表示格式檔案名稱。這個選項依賴於上述的動作,如果使用的是in或out,format_file表示已經存在的格式檔案,如果使用的是format則表示是要產生的格式檔案。
-x
這個選項要和-f format_file配合使用,以便產生xml格式的格式檔案。
-F first_row
指定從被匯出表的哪一行匯出,或從被匯入檔案的哪一行匯入。
-L last_row
指定被匯出表要導到哪一行結束,或從被匯入檔案導資料時,導到哪一行結束。
-c
使用char類型做為儲存類型,沒有首碼且以"\t"做為欄位分割符,以"\n"做為行分割符。
-w
和-c類似,只是當使用Unicode字元集拷貝資料時使用,且以nchar做為儲存類型。
-t field_term
指定字元分割符,預設是"\t"。
-r row_term
指定行分割符,預設是"\n"。
-S server_name[ \instance_name]
指定要串連的SQL Server伺服器的執行個體,如果未指定此選項,bcp串連原生SQL Server預設執行個體。如果要串連某台機器上的預設執行個體,只需要指定機器名即可。
-U login_id
指定串連SQL Sever的使用者名稱。
-P password
指定串連SQL Server的使用者名稱密碼。
-T
指定bcp使用信任連接登入SQL Server。如果未指定-T,必須指定-U和-P。
-k
指定空列使用null值插入,而不是這列的預設值。

2. 如何使用bcp匯出資料

(1) 使用bcp匯出整個表或視圖。
bcp AdventureWorks.sales.currency out c:\currency1.txt -c -U"sa" -P"password" --使用密碼串連或bcp AdventureWorks.sales.currency out c:\currency1.txt -c -T --使用信任連接
下面是上述命令執行後的輸出結果
Starting copy...
105 rows copied.
Network packet size (bytes): 4096
Clock Time (ms.) Total : 10 Average : (10500.00 rows per sec.)
下面是currency1.txt的部分內容
AED Emirati Dirham 1998-06-01 00:00:00.000
AFA Afghani 1998-06-01 00:00:00.000
... ... ...
... ... ...
ZWD Zimbabwe Dollar 1998-06-01 00:00:00.000
在使用密碼登入時需要將-U後的使用者名稱和-P後的密碼加上雙引號。
註:bcp除了可以在控制台執行外,還可以通過調用SQL Server的一個系統預存程序xp_cmdshell以SQL語句的方式運行bcp。如上述第一條命令可改寫為
EXEC master..xp_cmdshell 'bcp AdventureWorks.sales.currency out c:\currency1.txt -c -U"sa" -P"password"'
執行xp_cmdshell後,返回資訊以表的形式輸出。為了可以方便地在SQL中執行bcp,下面的命令都使用xp_cmdshell執行bcp命令。
(2) 對要匯出的表進行過濾。
bcp不僅可以接受表名或視圖名做為參數,也可以接受SQL做為參數。通過SQL語句可以對要匯出的表進行過濾,然後匯出過濾後的記錄。
EXEC master..xp_cmdshell 'bcp "SELECT TOP 20 * FROM AdventureWorks.sales.currency" queryout c:\currency2.txt -c -U"sa" -P"password"'
bcp還可以通過簡單地設定選項對匯出的行進行限制。
這條命令使用了兩個參數-F 10和-L 13,表示從SE
EXEC master..xp_cmdshell 'bcp "SELECT TOP 20 * FROM AdventureWorks.sales.currency" queryout c:\currency2.txt -F 10 -L 13 -c -U"sa" -P"password"'
LECT TOP 20 * FROM AdventureWorks.sales.currency所查出來的結果中取第10條到13條記錄進行匯出。

3. 如何使用bcp匯出格式檔案

bcp不僅可以根據表、視圖匯入匯出資料,還可以配合格式檔案對匯入匯出資料進行限制。格式檔案以純文字檔案形式存在,分為一般格式和xml格式。使用者可以手工編寫格式檔案,也可以通過bcp命令根據表、視圖自動產生格式檔案。
EXEC master..xp_cmdshell 'bcp AdventureWorks.sales.currency format nul -f c:\currency_format1.fmt -c -T'
上述命令將currency表的結構產生了一個格式檔案currency_format1.fmt,下面是這個格式檔案的內容。
9.0
3
1 SQLCHAR 0 6 "\t" 1 CurrencyCode SQL_Latin1_General_CP1_CI_AS
2 SQLCHAR 0 100 "\t" 2 Name SQL_Latin1_General_CP1_CI_AS
3 SQLCHAR 0 24 "\r\n" 3 ModifiedDate
這個格式檔案記錄了這個表的欄位(共3個欄位)類型、長度、字元和行分割符和欄位名等資訊。
bcp還可以通過-x選項產生xml格式的格式檔案。
EXEC master..xp_cmdshell 'bcp AdventureWorks.sales.currency format nul -f c:\currency_format2.fmt -x -c -T'
xml格式檔案所描述的內容和普通格式檔案所描述的內容完全一樣,只是格式不同。

4. 如何使用bcp匯入資料

bcp可以通過in命令將上面所匯出的currency1.txt和currency2.txt再重新匯入到資料庫中,由於currency有主鍵,因此我們將複製一個和currency的結構完全一樣的表。
SELECT TOP 0 * INTO AdventureWorks.sales.currency1 FROM AdventureWorks.sales.currency
將資料匯入到currency1表中
EXEC master..xp_cmdshell 'bcp AdventureWorks.sales.currency1 in c:\currency1.txt -c -T'
匯入資料也同樣可以使用-F和-L選項來選擇匯入資料的記錄行。
EXEC master..xp_cmdshell 'bcp AdventureWorks.sales.currency1 in c:\currency1.txt -c -F 10 -L 13 -T'
在匯入資料時可以根據已經存在的格式檔案將滿足條件的記錄匯入到資料庫中,不滿足則不匯入。如上述的格式檔案中的第三個欄位的字元長度是24,如果某個文字檔中的相應欄位的長度超過24,則這條記錄將不被匯入到資料庫中,其它滿足條件的記錄正常匯入。
使用普通的格式檔案
EXEC master..xp_cmdshell 'bcp AdventureWorks.sales.currency1 in c:\currency1.txt -F 10 -L 13 -c -f c:\currency_format1.fmt -T'
使用xml格式的格式檔案
EXEC master..xp_cmdshell 'bcp AdventureWorks.sales.currency1 in c:\currency1.txt -F 10 -L 13 -c -x -f c:\currency_format2.fmt -T'

總結

bcp命令是SQL Server提供的一個快捷的資料匯入匯出工具。使用它不需要啟動任何圖形管理工具就能以高效的方式匯入匯出資料。當然,它也可以通過xp_cmdshell在SQL語句中執行,通過這種方式可以將其放到用戶端程式中(如delphi、c#等)運行,這也是使用戶端程式具有資料匯入匯出功能的方法之一。

bcp命令詳解(sybase)

bcp 工具 + 生產力在 Microsoft SQL Server 2000 執行個體和資料檔案之間以使用者指定的格式複製資料。
文法
bcp {[[database_name.][owner].]{table_name | view_name} | "query"}
{in | out | queryout | format} data_file
[-m max_errors] [-f format_file] [-e err_file]
[-F first_row] [-L last_row] [-b batch_size]
[-n] [-c] [-w] [-N] [-V (60 | 65 | 70)] [-6]
[-q] [-C code_page] [-t field_term] [-r row_term]
[-i input_file] [-o output_file] [-a packet_size]
[-S server_name[\instance_name]] [-U login_id] [-P password]
[-T] [-v] [-R] [-k] [-E] [-h "hint [,...n]"]

參數
database_name

指定的表或視圖所在資料庫的名稱。如果未指定,則為使用者預設資料庫。

owner

表或視圖所有者的名稱。如果執行大量複製操作的使用者擁有指定的表或視圖,則 owner 是可選的。如果沒有指定 owner 並且執行大量複製操作的使用者不擁有指定的表或視圖,則 Microsoft? SQL Server? 2000 將返回錯誤資訊並取消大量複製操作。

table_name

是將資料複製到 SQL Server 時 (in) 的目的表名,以及從 SQL Server 複製資料時 (out) 的源表名。

view_name

是將資料複製到 SQL Server 時 (in) 的目的視圖名,以及從 SQL Server 複製資料時 (out) 的源視圖名。只有其中所有列都引用同一個表的視圖才能用作目的視圖。有關將資料複製到視圖的限制的更多資訊,請參見 INSERT。

Query

是返回一個結果集的 Transact-SQL 查詢。如果查詢返回多個結果集,例如指定 COMPUTE 子句的 SELECT 語句,只有第一個結果集將複製到資料檔案,隨後的結果集被忽略。使用雙引號引起查詢語句,使用單引號引起查詢語句中嵌入的任何內容。在從查詢中大量複製資料時,還必須指定 queryout。

in | out | queryout | format

指定大量複製的方向。in 是從檔案複製到資料庫表或視圖,out 是指從資料庫表或視圖複製到檔案。只有從查詢中大量複製資料時,才必須指定 queryout。根據指定的選項(-n、-c、-w、-6 或 -N)以及表或視圖分隔字元,format 將建立一個格式檔案。如果使用 format,則還必須指定 -f 選項。

說明 Microsoft SQL Server 6.5 中的 bcp 工具 + 生產力不支援大量複製到包含 sql_variant 或 bigint 資料類型的表。

data_file

大量複製表或視圖到磁碟(或者從磁碟複製)時所用資料檔案的完整路徑。當將資料大量複製到 SQL Server 時,此資料檔案包含將複製到指定表或視圖的資料。當從 SQL Server 大量複製資料時,該資料檔案包含從表或視圖複製的資料。路徑可以有 1 到 255 個字元。

-m max_errors

指定在大量複製操作取消之前可能產生的錯誤的最大數目。bcp 無法複製的每一行都將被忽略並計為一個錯誤。如果沒有包括該選項,則預設為 10。

-f format_file

指定格式檔案的完整路徑,該格式檔案包含以前在同一個表或視圖上使用 bcp 時的儲存響應。當使用由 format 選項所建立的格式檔案大量複製入或複製出資料時,使用此選項。格式檔案的建立是可選的。在提示幾個格式問題之後,bcp 將提示是否在格式檔案中儲存回答。預設檔案名稱為 Bcp.fmt。大量複製資料時,bcp 可引用一個格式檔案,因此不必重新互動輸入以前的回答。如果未使用此選項,也沒有指定 –n、-c、-w、-6 或 -N,則 bcp 將提示輸入格式資訊。

-e err_file

指定錯誤檔案的完整路徑,此錯誤檔案用於儲存 bcp 無法從檔案傳輸到資料庫的所有行。來自 bcp 的錯誤資訊將發送到使用者工作站。如果未使用此選項,則不建立錯誤檔案。

-F first_row

指定要大量複製的第一行的序數。預設值是 1,表示在指定資料檔案的第一行。

-L last_row

指定要大量複製的最後一行的序數。預設值是 0,表示指定資料檔案中的最後一行。

-b batch_size

指定所複製的每批資料中的行數。每個批處理作為一個事務複製至伺服器。SQL Server 提交或復原(在失敗時)每個批處理的事務。預設情況下,指定的資料檔案中的所有資料都作為一批覆制。請不要與 -h "ROWS_PER_BATCH = bb" 選項一起使用。

-n

使用資料的本機(資料庫)資料類型執行大量複製操作。此選項不提示輸入每一欄位,它將使用本機值。

-c

使用字元資料類型執行大量複製操作。此選項不提示輸入每一欄位;它使用 char 作為儲存類型,不帶首碼,\t(定位字元)作為欄位分隔符號,\n(分行符號)作為行終止符。

-w

使用 Unicode 字元執行大量複製操作。此選項不提示輸入每一欄位;它使用 nchar 作為儲存類型,不帶首碼,\t(定位字元)作為欄位分隔符號,\n(分行符號)作為行終止符。不能在 SQL Server 6.5 版或更早版本中使用。

-N

對非字元資料使用資料的本機(資料庫)資料類型和對字元資料使用 Unicode 字元類型執行大量複製操作。這是可替代 -w 選項的效能更高的選項,其目的是使用資料檔案將資料從一個 SQL Server 傳輸到另一個 SQL Server 中。它不提示輸入每一欄位。在需要傳輸包含 ANSI 擴充字元的資料以及想利用原生模式的效能時,可以使用這一選項。不能在 SQL Server 6.5 版或更早版本中使用 -N 選項。

-V (60 | 65 | 70)

使用 SQL Server 早期版本中的資料類型執行大量複製操作。此選項與字元 (-c) 或本機 (-n) 格式一起使用。此選項並不提示輸入每一欄位,它使用預設值。例如,若要將 SQL Server 6.5 中的 bcp 工具 + 生產力所支援(但 ODBC 不再支援)的日期格式大量複製到 SQL Server 2000,可使用 -V 65 參數。

重要 將資料從 SQL Server 大量複製到資料檔案時,即使指定了 –V,bcp 工具 + 生產力也不會為任何 datetime 或 smalldatetime 資料產生 SQL Server 6.0 或 SQL Server 6.5 的日期格式。日期將始終以 ODBC 格式寫入。另外,由於 SQL Server 6.5 版或更早版本不支援可為空白的 bit 資料,因此 bit 列中的空值寫為值 0。

-6

使用 SQL Server 6.0 或 SQL Server 6.5 資料類型執行大量複製操作。僅為保持向後相容性。改為使用 –V 選項。

-q

在 bcp 工具 + 生產力和 SQL Server 執行個體的串連中執行 SET QUOTED_IDENTIFIERS ON 語句。使用該選項指定包含空格或引號的資料庫、所有者、表或視圖的名稱。將由三部分組成的整個表名或視圖名引在雙引號 (" ") 中。

-C code_page

僅為保持向後相容性。作為代替,請在格式檔案或互動式 bcp 中為每一列指定一個定序名。

指定資料檔案中的資料字碼頁。只有當資料中包含字元值大於 127 或小於 32 的 char、varchar 或 text 列時,code_page 才有用。

字碼頁值 描述
ACP ANSI/Microsoft Windows? (ISO 1252)。
OEM 客戶程式使用的預設字碼頁。如果未指定 -C,則這是 bcp 使用的預設字碼頁。
RAW 不發生從一個字碼頁到另一個字碼頁的轉換。因為不發生轉換,所以這是最快的選項。
<值> 特定的字碼頁號碼,例如 850。

-t field_term

指定欄位結束字元。預設的欄位結束字元是 \t(定位字元)。使用此參數替代預設欄位結束字元。

-r row_term

指定行終止符。預設的行終止符是 \n(分行符號)。使用此參數替代預設行終止符。

-i input_file

指定回應檔的名稱,使用互動模式(未指定 –n、-c、-w、-6 或 -N)執行大量複製時,回應檔包含對每一欄位命令提示問題的響應。

-o output_file

指定接收 bcp 輸出(從命令提示重新導向)的檔案的名稱。

-a packet_size

指定發送到和發送自伺服器的每個網路資料包的位元組數。可以使用 SQL Server 企業管理器(或 sp_configure 系統預存程序)設定伺服器配置選項。但是,使用此選項可以單個地替代伺服器配置選項。packet_size 可以設定為 4096 到 65535 位元組,預設值為 4096。

資料包大小的增加能夠提高大量複製操作的效能。如果要求一個較大的資料包而得不到,則使用預設設定。bcp 產生的效能統計顯示出所使用資料包的大小。

-S server_name[\instance_name]

指定要串連到的 SQL Server 執行個體。指定 server_name 以串連該伺服器上的 SQL Server 預設執行個體。指定 server_name\instance_name 以串連到該伺服器上的 SQL Server 2000 具名執行個體。如果未指定伺服器,則 bcp 串連到本機電腦上的 SQL Server 預設執行個體。從網路上的遠端電腦執行 bcp 時,要求此選項。

-U login_id

指定用於串連到 SQL Server 的登入 ID。

-P password

指定登入 ID 的密碼。如果未使用此選項,則 bcp 將提示輸入密碼。如果不帶密碼將此選項用於命令提示行末尾,則 bcp 將使用預設密碼 (NULL)。

-T

指定 bcp 使用網路使用者的安全憑據,通過信任連接串連到 SQL Server。不需要 login_id 和 password。

-v

報告 bcp 工具 + 生產力的版本號碼和著作權。

-R

指定使用為用戶端電腦的地區設定定義的地區格式,將貨幣、日期和時間資料大量複製到 SQL Server 中。預設情況下,將會忽略地區設定。

-k

指定在大量複製操作中空列應保留一個空值,而不是對插入的列賦予預設值。

bcp 的一般用法

用法: bcp {dbtable | query} {in | out | queryout | format} 資料檔案

[-m 最大錯誤數] [-f 格式檔案] [-e 錯誤檔案]
[-F 首行] [-L 末行] [-b 批大小]
[-n 本機類型] [-c 字元類型] [-w 寬字元類型]
[-N 將非文本保持為本機類型] [-V 檔案格式版本] [-q 引號識別項]
[-C 字碼頁說明符] [-t 欄位結束字元] [-r 行終止符]
[-i 輸入檔案] [-o 輸出檔案] [-a 資料包大小]
[-S 伺服器名稱] [-U 使用者名稱] [-P 密碼]
[-T 可信串連] [-v 版本] [-R 允許使用地區設定]
[-k 保留空值] [-E 保留標識值]
[-h"載入提示"] [-x 產生xml 格式檔案]
匯入csv格式檔案
Exec master..xp_cmdshell 'bcp "SSIS.dbo.tb2" in "E:\export.csv" -c -t"," -r"\n" -T'
匯出成csv
Exec master..xp_cmdshell 'bcp "SSIS.dbo.tb2" out "E:\test.csv" -c -t"," -r"\n" -T'
將特定查詢匯出成預設格式
預設以定位字元間隔,"\n"換行
Exec master..xp_cmdshell 'bcp "select carbrand,longitude from ssis.dbo.tb2" queryout "E:\test2.txt" -c -T'
其他情況參考:http://msdn.microsoft.com/zh-cn/library/ms162802.aspx
啟用xp_cmdshell
EXEC sp_configure 'show advanced options', 1
GO
RECONFIGURE
GO
EXEC sp_configure 'xp_cmdshell', 1
GO
RECONFIGURE
GO

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.