前些天遇到特殊需求,兩台SqlServer伺服器天隔一方,需要實效性很高的資料同步。
大家知道通過internet網,要高準確性和高實效性的實現兩台資料庫資料同步是個棘手的問題。
網路上找了些資料,有一篇文章可供參考,有以下一些心得:
1)internet中使用合併式複寫比較好。快照式複寫適合資料變化不大的場合,而事務複製適合長期串連。
2)發行伺服器使用ftp來發布。這樣會避免很多配置導致的問題。就是配置發行伺服器時候注意,從“FTP根到該檔案夾的客戶機路徑”欄要輸入“/FTP/”,因為這個“/FTP/”檔案夾是系統自動建立的,而訂閱伺服器是自己找不到的。
我想可能還有其他一些辦法資料同步,期望和大家探討。
[文章轉載]http://www.sxsoft.com/technology_test/show_news.asp?id=450 利用資料庫複寫技術 實現資料同步更新
作者:lobeben 來源:lobeben 的 Blog
利用資料庫複寫技術 實現資料同步更新
複製的概念
複製是將一組資料從一個資料來源拷貝到多個資料來源的技術,是將一份資料發布到多個儲存網站上的有效方式。使用複製技術,使用者可以將一份資料發布到多台伺服器上,從而使不同的伺服器使用者都可以在許可權的許可的範圍內共用這份資料。複製技術可以確保分布在不同地點的資料自動同步更新,從而保證資料的一致性。
SQL複製的基本元素包括
出版伺服器、訂閱伺服器、散發者、出版物、文章
SQL複製的工作原理
SQL SERVER 主要採用出版物、訂閱的方式來處理複製。來源資料所在的伺服器是出版伺服器,負責發表資料。出版伺服器把要發表的資料的所有改變情況的拷貝複製到散發者,散發者包含有一個散發資料庫,可接收資料的所有改變,並儲存這些改變,再把這些改變分發給訂閱伺服器
SQL SERVER複製技術類型
SQL SERVER提供了三種複製技術,分別是:
1、快照式複寫(呆會我們就使用這個)
2、事務複製
3、合併式複寫
只要把上面這些概念弄清楚了那麼對複製也就有了一定的理解。接下來我們就一步一步來實現複製的步驟。
第一先來配置出版伺服器
(1)選中指定[伺服器]節點
(2)從[工具]下拉式功能表的[複製]子功能表中選擇[發布、訂閱伺服器和分發]命令
(3)系統彈出一個對話方塊點[下一步]然後看著提示一直操作到完成。
(4)當完成了出版伺服器的設定以後系統會為該伺服器的樹形結構中添加一個複製監視器。同時也產生一個散發資料庫(distribution)
第二建立出版物
(1)選中指定的伺服器
(2)從[工具]菜單的[複製]子功能表中選擇[建立和管理髮布]命令。此時系統會彈出一個對話方塊
(3)選擇要建立出版物的資料庫,然後單擊[建立發布]
(4)在[建立發布嚮導]的提示對話方塊中單擊[下一步]系統就會彈出一個對話方塊。對話方塊上的內容是複製的三個類型。我們現在選第一個也就是預設的快照發布(其他兩個大家可以去看看協助)
(5)單擊[下一步]系統要求指定可以訂閱該發布的資料庫伺服器類型,SQLSERVER允許在不同的資料庫如 ORACLE或ACCESS之間進行資料複製。但是在這裡我們選擇運行“SQL SERVER 2000“的資料庫伺服器
(6)單擊[下一步]系統就彈出一個定義文章的對話方塊也就是選擇要出版的表
(7)然後[下一步]直到操作完成。當完成出版物的建立後建立出版物的資料庫也就變成了一個共用資料庫。
第三設計訂閱
(1)選中指定的訂閱伺服器
(2)從[工具]下拉式功能表中選擇[複製]子功能表的[提取訂閱]
(3)按照單擊[下一步]操作直到系統會提示檢查SQL SERVER代理服務的運行狀態,執行複製操作的前提條件是SQL SERVER代理服務必須已經啟動。
(4)單擊[完成]。完成訂閱操作。
完成上面的步驟其實複製也就是成功了。但是如何來知道複製是否成功了呢?這裡可以通過這種方法來快速看是否成功。展開出版伺服器下面的複製——發布內容——右鍵發布內容——屬性——擊活——狀態然後點立即運行代理程式接著點代理程式屬性擊活調度把調度設定為每一天發生,每一分鐘,在0:00:00和23:59:59之間。接下來就是判斷複製是否成功了開啟C:\Program Files\Microsoft SQL Server\MSSQL\REPLDATA\unc\XIAOWANGZI_database_database下面看是不是有一些以時間做為檔案名稱的檔案夾差不多一分中就產生一個。要是你還不信的話就開啟你的資料庫看在訂閱的伺服器的指定訂閱資料庫下看是不是看到了你剛才所發布的表—
一個手工同步的方案
--定時同步伺服器上的資料
--例子:
--測試環境,SQL Server2000,遠程伺服器名:xz,使用者名稱為:sa,無密碼,測試資料庫:test
--伺服器上的表(查詢分析器串連到伺服器上建立)
create table [user](id int primary key,number varchar(4),name varchar(10))
go
--以下在區域網路(本機操作)
--原生表,state說明:null 表示新增記錄,1 表示修改過的記錄,0 表示無變化的記錄
if exists (select * from dbo.sysobjects where id = object_id(N’[user]’) and OBJECTPROPERTY(id, N’IsUserTable’) = 1)
drop table [user]
GO
create table [user](id int identity(1,1),number varchar(4),name varchar(10),state bit)
go
--建立觸發器,維護state欄位的值
create trigger t_state on [user]
after update
as
update [user] set state=1
from [user] a join inserted b on a.id=b.id
where a.state is not null
go
--為了方便同步處理,建立連結的伺服器到要同步的伺服器
--這裡的遠程伺服器名為:xz,使用者名稱為:sa,無密碼
if exists(select 1 from master..sysservers where srvname=’srv_lnk’)
exec sp_dropserver ’srv_lnk’,’droplogins’
go
exec sp_addlinkedserver ’srv_lnk’,’’,’SQLOLEDB’,’xz’
exec sp_addlinkedsrvlogin ’srv_lnk’,’false’,null,’sa’
go
--建立同步處理的預存程序
if exists (select * from dbo.sysobjects where id = object_id(N’[dbo].[p_synchro]’) and OBJECTPROPERTY(id, N’IsProcedure’) = 1)
drop procedure [dbo].[p_synchro]
GO
create proc p_synchro
as
--set XACT_ABORT on
--啟動遠程伺服器的MSDTC服務
--exec master..xp_cmdshell ’isql /S“xz“ /U“sa“ /P““ /q“exec master..xp_cmdshell ’’net start msdtc’’,no_output“’,no_output
--啟動原生MSDTC服務
--exec master..xp_cmdshell ’net start msdtc’,no_output
--進行分布交易處理,如果表用識別欄位做主鍵,用下面的方法
--BEGIN DISTRIBUTED TRANSACTION
--同步刪除的資料
delete from srv_lnk.test.dbo.[user]
where id not in(select id from [user])
--同步新增的資料
insert into srv_lnk.test.dbo.[user]
select id,number,name from [user] where state is null
--同步修改的資料
update srv_lnk.test.dbo.[user] set
number=b.number,name=b.name
from srv_lnk.test.dbo.[user] a
join [user] b on a.id=b.id
where b.state=1
--同步後更新原生標誌
update [user] set state=0 where isnull(state,1)=1
--COMMIT TRAN
go
--建立作業,定時執行資料同步的預存程序
if exists(SELECT 1 from msdb..sysjobs where name=’資料處理’)
EXECUTE msdb.dbo.sp_delete_job @job_name=’資料處理’
exec msdb..sp_add_job @job_name=’資料處理’
--建立作業步驟
declare @sql varchar(800),@dbname varchar(250)
select @sql=’exec p_synchro’ --資料處理的命令
,@dbname=db_name() --執行資料處理的資料庫名
exec msdb..sp_add_jobstep @job_name=’資料處理’,
@step_name = ’資料同步’,
@subsystem = ’TSQL’,
@database_name=@dbname,
@command = @sql,
@retry_attempts = 5, --重試次數
@retry_interval = 5 --稍候再試
--建立調度
EXEC msdb..sp_add_jobschedule @job_name = ’資料處理’,
@name = ’時間安排’,
@freq_type = 4, --每天
@freq_interval = 1, --每天執行一次
@active_start_time = 00000 --0點執行
go