Oracle GoldenGate學習之Goldengate介紹____Oracle

來源:互聯網
上載者:User

     GoldenGate TDM(交易資料管理)軟體是一種基於日誌的結構化資料複製軟體,它通過解析來源資料庫線上日誌或歸檔日誌獲得資料的增刪改變化,再將這些變化應用到目標資料庫,實現來源資料庫與目標資料庫同步、雙活。GoldenGate TDM 軟體可以在異構的IT基礎結構(包括幾乎所有常用作業系統平台和資料庫平台)之間實現大量資料亞秒一級的即時複製,其複製過程簡圖如下:


如上圖所示,GoldenGate TDM的資料複製過程如下:

    利用捕捉進程(Capture Process)在源系統端讀取Online Redo Log或Archive Log,然後進行解析,只提取其中資料的變化如增、刪、改操作,並將相關資訊轉換為GoldenGate TDM自訂的中間格式存放在隊列檔案中。再利用傳送進程將隊列檔案通過TCP/IP傳送到目標系統。捕捉進程在每次讀完log中的資料變化並在資料傳送到目標系統後,會寫檢查點,記錄當前完成捕捉的log位置,檢查點的存在可以使捕捉進程在中止並恢複後可從檢查點位置繼續複製;

   目標系統接受資料變化並緩衝到GoldenGate TDM隊列當中,隊列為一系列臨時儲存資料變化的檔案,等待投遞進程讀取資料;

    GoldenGate TDM投遞進程從隊列中讀取資料變化並建立對應的SQL語句,通過資料庫的本地介面執行,提交到資料庫成功後更新自己的檢查點,記錄已經完成複製的位置,資料的複製過程最終完成。

    由此可見,GoldenGate TDM是一種基於軟體的資料複製方式,它從資料庫的日誌解析資料的變化(資料量只有日誌的四分之一左右)。GoldenGate TDM將資料變化轉化為自己的格式,直接通過TCP/IP網路傳輸,無需依賴於資料庫自身的傳遞方式,而且可以通過高達9:1的壓縮率對資料進行壓縮,可以大大降低頻寬需求。在目標端,GoldenGate TDM可以通過交易重組,分批載入等技術手段大大加快資料投遞的速度和效率,降低目標系統的資源佔用,可以在亞秒級實現大量資料的複製,並且目標端資料庫是活動的

GoldenGate TDM提供了靈活的應用方案,基於其先進、靈活的技術架構可以根據使用者需求組成各種拓撲結構,如圖所示:


GoldenGate TDM 可以提供可靠的資料複製,主要體現在下面三點:  

保證事務一致性

GoldenGate TDM 在災備資料庫應用複製資料庫交易的順序與在生產中樞資料庫上的順序相同,並且按照相同的事務環境提交,確保在目標系統上資料的完整性和讀一致性,為即時查詢和交易處理創造了條件。  

檢查點機制保障資料無丟失

GoldenGate TDM的抽取和複製進程使用檢查點機制記錄完成複製的位置。對於抽取進程,其檢查點記錄當前已經抽取日誌的位置和寫隊列檔案的位置;對於投遞進程,其檢查點記錄當前讀取隊列檔案的位置。檢查點機制可以保證在系統、網路或GoldenGate TDM進程故障重啟後資料無丟失。

可靠的資料轉送機制

GoldenGate TDM 用應答機制傳輸交易資料,只有在得到確認訊息後才認為資料轉送完成,否則將自動重新傳輸資料,從而保證了抽取出的所有資料都能發送到備份端。資料轉送過程中支援128位加密和資料壓縮功能。

GoldenGate TDM 可以提供可靠的資料複製,主要體現在下面三點:  

保證事務一致性

GoldenGate TDM 在災備資料庫應用複製資料庫交易的順序與在生產中樞資料庫上的順序相同,並且按照相同的事務環境提交,確保在目標系統上資料的完整性和讀一致性,為即時查詢和交易處理創造了條件。  

檢查點機制保障資料無丟失

GoldenGate TDM的抽取和複製進程使用檢查點機制記錄完成複製的位置。對於抽取進程,其檢查點記錄當前已經抽取日誌的位置和寫隊列檔案的位置;對於投遞進程,其檢查點記錄當前讀取隊列檔案的位置。檢查點機制可以保證在系統、網路或GoldenGate TDM進程故障重啟後資料無丟失。

可靠的資料轉送機制

GoldenGate TDM 用應答機制傳輸交易資料,只有在得到確認訊息後才認為資料轉送完成,否則將自動重新傳輸資料,從而保證了抽取出的所有資料都能發送到備份端。資料轉送過程中支援128位加密和資料壓縮功能。

Oracle 公司的GoldenGate產品,可以在異構的IT基礎結構之間實現大量資料的秒一級的資料捕捉、轉換和投遞。GoldenGate可以支援幾乎所有常用作業系統如和資料庫平台,如下表所示:

作業系統

資料庫

MS NT, 2000, XP, Linux, Sun Solaris, HP-UX, IBM AIX, HP NonStop, TRU64, IBM z/OS,OS/390

Oracle, DB2, MS SQL Server, MySQL, Enscribe, SQL/MP, SQL/MX, Sybase, Teradata, 其他ODBC 相容資料庫

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.