使用SSIS建立同步資料庫資料任務的方法_MsSql

來源:互聯網
上載者:User
這些包可以獨立使用,也可以與其他包一起使用以滿足複雜的業務需求。Integration Services 可以提取和轉換來自多種源(如 XML 資料檔案、一般檔案和關係資料來源)的資料,然後將這些資料載入到一個或多個目標。(摘自MSDN,更多詳細資料可參考:http://technet.microsoft.com/zh-cn/library/ms141026(v=sql.105).aspx)

下面我使用SSIS來示範一個實際例子。比如我有一個資料庫,出於備份資料或者其它的目的,會週期性對這個資料庫的資料移轉到其它的資料庫去。遷移的時候,有些新增的欄位會被插入備份資料庫,而有些被修改過的欄位也會在備份資料庫被修改。現在我們就用SSIS來完成這項任務。

首先在我來源資料庫db_source和目標資料庫db_destination中運行以下SQL建立好需要的表,就以這一個表test_1來進行示範。

複製代碼 代碼如下:

CREATE TABLE [dbo].[test_1](
[Id] [int] IDENTITY(1,1) NOT NULL primary key,
[Name] [varchar](50) NULL,
[Age] [int] NULL
)


建好表好在來源資料表中可以隨便加幾條記錄,目標資料庫暫時留空。

現在我們開啟VS,建立一個Intergration Services Project。(注意:如果SQL Server 裝的是Express版的話是沒有這個項目工程模板的)

 

建立好工程後,在Control Flow這個Tab下拖入一個Data Flow Task,如下圖:

 

雙擊這個Data Flow Task,我們就會進入Data Flow這個Tab標籤中。

 

然後我們在左邊工具列裡找到OLE DB Source,繼續拖兩個OLE DB Source出來。分別給它們命名為Source DB和Destination DB。

 

將資料來源拖出來後,雙擊它,可以對它進行一些設定,主要就是連結資料庫及選擇你要進行遷移的表或者視圖等設定,這裡我就不詳細說明了。注意一點的是就像上圖所示,如果一個圖形上出現一個紅X的話說明設定有錯誤。

再來就是拖兩個Sort及一個Merge Join出來,將之前的資料來源箭頭分別指向兩個Sort,最後兩個Sort出來的資料同時輸入Merge Join中。

分別雙擊兩個Sort,鉤選表中的ID,對ID這個欄位進行一次排序。因為Merge Join這個流程要求輸入的資料是已排序好的。這個排序也可以直接在資料來源中對它們的輸出欄位設定SortKeyPosition這個屬性來排序。(詳見:http://msdn.microsoft.com/zh-cn/library/ms137653.aspx)

這裡我們第一次從Sort拉箭頭到Merge Join的時候,會讓我們選擇這個輸入的資料是作為左輸入還是右輸入,我們按照圖示的那樣,左邊的作為左輸入,右邊的作為右輸入。然後我們雙擊Merge Join,按照如下圖所示設定:

這裡打鉤的是這個流程之後輸出的資料,Join Type需要選擇為Left outer join,因為左邊是我們的未經處理資料表,右邊是我們備份的表,右表可以看成是一個左表的一個子集,如果左表有的資料,右表沒有的,那些就是需要新插入備份資料庫的資料。

現在我們需要一個分支,即新的資料需要插入備份資料庫中,而已有的資料需要更新為新的值。我們從工具列中拖入一個Conditional Split來進行這樣的分支處理。我們將Merge Sort中的輸出指向Conditional Split,然後雙擊Conditional Split,如下圖所示設定(注意條件一個是ISNULL,一個是非ISNULL)。

這時它們的輸入值就被分成兩種條件輸出,最後我們再拖入一個OLE DB Destination來插入資料和一個OLE DB Command來更新資料庫,最終流程如下圖:

 

雙擊設定OLE DB Destionation,選擇好資料匯入的目標資料庫中的表,這裡需要注意的就是要鉤選Keep identity這個選項,因為我建立表的時候對ID欄位使用了自增屬性。

雙擊設定OLE DB Command,首先在Connection Managers這個Tab中選擇好連結化物件,然後在Component Properties這個選項卡中,設定你的SqlCommand屬性。如下圖:

 

這裡的參數值都是用?號來代替,之後在Column Mappings這個Tab中設定代替值實際代替的列,如下圖:

至此,任務就建立完畢了,沒有編寫任何代碼,直接拖拉完成了。現在可以直接在VS中按F5運行看下效果,我們的目標資料表將插入來源資料表中的值。然後我們修改一下原資料表,再來運行一下上面這個任務,就可以在目標資料庫中看到更改了。

那麼如何去定時完成任務哩?這裡可以用SQL Server Agent去調用上面我們寫好的包, 或者在Windows計劃任務中使用DTExec.exe去執行上面的任務。

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.