OGG實現兩台Oracle數據庫的同步


今天通過最簡單的一個例子,給大家講解下 goldengate 實現兩台Oracle數據庫的同步。
內容如下:
1.配置數據庫信息。
2.安裝golden gate.
3.配置golden gate.
4.測試同步情況

首先我們看看實驗環境

環境

源端是一個單實例
Oracle Enterprise 5 + ORACLE 10.2.0.4
IP :10.4.128.100 

目標端是一個單實例
Oracle Enterprise 5 + ORACLE 10.2.0.4
IP :10.4.128.101

兩台主機均已創建數據庫,sid分別為devdb 和 emrep

配置devdb 到 emrep的數據同步

goldengate版本11.2.1.0

1.配置數據庫信息

 

在源端數據庫中打開歸檔模式

 

SQL> archive log list

Database log mode              Archive Mode
Automatic archival             Enabled
Archive destination            /u01/archive1
Oldest online log sequence     180
Next log sequence to archive   181
Current log sequence           181

若處於非歸檔模式,則改為歸檔模式:
SQL> shutdown immediate
Database closed.
Database dismounted.
ORACLE instance shut down.
SQL> startup mount;
ORACLE instance started.
SQL> alter database archivelog;
Database altered.
SQL> alter database open;
Database altered.

 

在源端數據庫中打開force logging

 

SQL> select force_logging from v$database;
FOR
---
NO
SQL> alter database force logging;
Database altered.
SQL> select force_logging from v$database;
FOR
---
YES 

在源端數據庫中打開supplemental log

SQL> select supplemental_log_data_min from v$database;

SUPPLEME
--------
NO

SQL> alter database add supplemental log data;

Database altered.
切換日志,使更改生效
SQL> alter system switch logfile;
System altered.

SQL> select supplemental_log_data_min from v$database;

SUPPLEME
--------
YES 

 

在源端數據庫中關閉回收站


官方的說明是,由於一個已知的問題,回收站會對DDL觸發器產生影響,因此需要關閉。由此可見,我們只需要在源庫中關閉回收站即可。

SQL> show parameter recyclebin

NAME TYPE VALUE
------------------------------------ ----------- ------------------------------
recyclebin string on


SQL> alter system set recyclebin=off;

System altered.

SQL> show parameter recyclebin

NAME TYPE                                VALUE
------------------------------------ -------------------------------
recyclebin string                          OFF

 

創建goldengate數據庫用戶(源和目標)

 

注意:源和目標端都需要

[oracle@rac1 ~]$ sqlplus / as sysdba

SQL*Plus: Release 10.2.0.4.0 - Production on Fri Jan 9 11:56:28 2015
Copyright (c) 1982, 2007, Oracle. All Rights Reserved.


Connected to:
Oracle Database 10g Enterprise Edition Release 10.2.0.4.0 - 32bit Production
With the Partitioning, OLAP, Data Mining and Real Application Testing options

SQL> create tablespace goldengate;

Tablespace created.

SQL> create user goldengate identified by goldengate default tablespace goldengate;

User created.

SQL> grant connect,resource to goldengate;

Grant succeeded.

SQL> grant execute on utl_file to goldengate;

Grant succeeded.

SQL>


抽取進程使用的數據庫用戶需要額外的權限,我們將這些權限也授予數據庫用戶goldengate(在源端數據庫中執行)

SQL> exec dbms_streams_auth.grant_admin_privilege('GOLDENGATE');

PL/SQL procedure successfully completed.

SQL> grant insert on system.logmnr_restart_ckpt$ to goldengate;

Grant succeeded.

SQL> grant update on sys.streams$_capture_process to goldengate;

Grant succeeded.

SQL> grant become user to goldengate;

Grant succeeded.

SQL>

為了確保GoldenGate正常運行,特別是在目標端,賦予goldengate用戶DBA權限:
SQL> grant dba to goldengate;

 

2.GoldenGate安裝環境

 

 

解壓goldengate安裝文件到安裝目錄

 

安裝GoldenGate軟件很簡單,解壓即可
以goldengate用戶登錄
[goldengate@rac1 goldengateMedia]$ mkdir /opt/gg/goldengate、
[goldengate@rac1 goldengateMedia]$ cp ggs_Linux_ora10g_.tar /opt/gg/goldengate
[goldengate@rac1 goldengateMedia]$ cd /opt/gg/goldengate
[goldengate@rac1 goldengate]$ tar -xvf ggs_Linux_ora10g.tar

 

 

配置環境變量

 

源端和目標端:
修改goldengate用戶的環境變量配置文件(ORACLE_SID按實際情況修改)
cat>>/home/goldengate/.bashrc<<EOF
ORACLE_HOME=/opt/app/oracle/product/10.2.0/db_1
export ORACLE_HOME
ORACLE_SID=devdb
export ORACLE_SID
GG_HOME=/opt/gg/goldengate
export GG_HOME
PATH=\$ORACLE_HOME/bin:$GG_HOME:\$PATH
export PATH
LD_LIBRARY_PATH=\$ORACLE_HOME/lib:\$GG_HOME:\$LD_LIBRARY_PATH
export LD_LIBRARY_PATH
EOF
應用剛剛修改的環境變量,然后進入GoldenGate安裝目錄,執行ldd ggsci,確定需要的庫文件都能夠找到。如果出現共享庫文件無法找到,例如libnnz10.so => not found,檢查LD_LIBRARY_PATH環境變量的設置
[goldengate@ggdb goldengate]$ source ~/.bashrc
[goldengate@ggdb goldengate]$ cd $GG_HOME
[goldengate@ggdb goldengate]$ ldd ggsci
我們可以認為ogg的安裝其實就是一個解壓。非常簡單。

3.配置goldengate

創建goldengate工作目錄

源端和目標端:

[goldengate@rac1 goldengate]$ cd $GG_HOME
[goldengate@rac1 goldengate]$ ./ggsci

GGSCI (rac1) 1> create subdirs

Creating subdirectories under current directory /opt/gg/goldengate

Parameter files /opt/gg/goldengate/dirprm: created
Report files /opt/gg/goldengate/dirrpt: created
Checkpoint files /opt/gg/goldengate/dirchk: created
……

GGSCI (gg1) 2> exit

創建trail文件存放目錄

源和目標端:

[goldengate@rac1 ~]$ mkdir /opt/gg/trails
[goldengate@rac1 ~]$ ls -l /opt/gg | grep trails

配置MANAGER

 

源端和目標端:

DYNAMICPORTLIST中配置了GoldenGate(extract和replicat)進程使用的端口范圍
PORT參數指定MANAGER使用的端口
AUTORESTART參數使抽取/復制進程失敗后自動重啟
配置MANAGER的參數,PURGEOLDEXTRACTS參數指定:當根據checkpoint發現已經完成抽取和復制的trail文件將被自動刪除,但保留最近10個。
PURGEDDLHISTORY和PURGEMARKERHISTORY分別刪除DDL歷史表和marker表中的過期數據,以控制它們不會變得過於龐大。

GGSCI (gg1) 1> edit params mgr

PORT 5898
PURGEOLDEXTRACTS /opt/gg/trails/w1*, USECHECKPOINTS, MINKEEPFILES 10
AUTORESTART ER *, RETRIES 3, WAITMINUTES 5
PURGEDDLHISTORY MINKEEPDAYS 3, MAXKEEPDAYS 5, FREQUENCYMINUTES 30
PURGEMARKERHISTORY MINKEEPDAYS 3, MAXKEEPDAYS 5, FREQUENCYMINUTES 30


全局參數設置


源端:

GGSCI (rac1) 2> edit params ./globals
GGSCHEMA goldengate

目標端:

創建一個checkpoint表
replicat通過這個表來維護trail文件中的read position。這不是個必須的操作,如果沒有這個表,則通過一個磁盤文件來維護

GGSCI (ggdb) 2> dblogin userid goldengate,password goldengate
Successfully logged into database.

GGSCI (ggdb) 3> add checkpointtable goldengate.chkpoint

Successfully created checkpoint table GOLDENGATE.CHKPOINT.

GGSCI (ggdb) 4> edit params ./globals

GGSCHEMA goldengate
CHECKPOINTTABLE goldengate.chkpoint
補充日志: Supplemental Log是一種補充類型的日志,主要用於邏輯Standby數據庫的同步、LogMiner、Streams和Flashback等技術。對於邏輯Standby數據庫來說,不能通過ROWID來標識某一行,Oracle推薦使用主鍵、約束和索引唯一標識行數據,但如果某部分表由於某種原因沒有主鍵、唯一約束和唯一索引,不能有效的標識行數據,那么必須通過Supplemental Log記錄多個字段甚至所有字段值來唯一標識表行。

 oracle scope=both和scope=spfile區別:

Oracle spfile就是動態參數文件,里面設置了Oracle 的各種參數。所謂的動態,
就是說你可以在不關閉數據庫的情況下,更改數據庫參數,記錄在spfile里面。更改參數
的時候,有4種scope選項,scope就是范圍。
scope=spfile 僅僅更改spfile里面的記載,不更改內存,也就是不立即生效,而是等
下次數據庫啟動生效。
有一些參數只允許用這種方法更改,scope=memory 僅僅更改內存,不改spfile。也就是下次
啟動就失效了
 scope=both 內存和spfile都更改,不指定scope參數,等同於scope=both。

 

使用OGG,兩個Oracle庫之間單向同步數據  http://www.linuxidc.com/Linux/2014-07/104465.htm

GoldenGate單向表DML同步 http://www.linuxidc.com/Linux/2013-04/82942.htm

Oracle GoldenGate 系列:Extract 進程的恢復原理 http://www.linuxidc.com/Linux/2013-04/82563.htm

Oracle GoldenGate安裝配置 http://www.linuxidc.com/Linux/2013-02/79455.htm

Oracle goldengate的OGG-01004 OGG-1296錯誤 http://www.linuxidc.com/Linux/2011-08/40951.htm

Oracle GoldenGate快速入門教程:基本概念和配置 http://www.linuxidc.com/Linux/2014-09/106677.htm

搭建一個Oracle到Oracle的GoldenGate雙向復制環境 http://www.linuxidc.com/Linux/2014-11/109101.htm

日志記錄模式(LOGGING 、FORCE LOGGING 、NOLOGGING):https://blog.csdn.net/leshami/article/details/6130866


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM