前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >GoldenGate简单复制环境的搭建(r10笔记第79天)

GoldenGate简单复制环境的搭建(r10笔记第79天)

作者头像
jeanron100
发布2018-03-21 10:15:09
7990
发布2018-03-21 10:15:09
举报

今天试了下搭建GoldenGate,搭建的过程也简单总结了一下。 目前源数据库是newtest2 目标数据库是dataguru 都是11.2.0.4.0版本 关于GoldenGate的下载可以到下面的链接下载 http://www.oracle.com/technetwork/middleware/goldengate/downloads/index.html 在11g中,存在一个和GoldenGate有关的参数,默认是false,我们需要在源库,目标库都开启

 SQL> show parameter golde
 NAME                                 TYPE                   VALUE
 ------------------------------------ ---------------------- ------------------------------
 enable_goldengate_replication        boolean                FALSE
 
 SQL> alter system set enable_goldengate_replication=true;
 alter database

然后查看supplemental log的情况,这个也是需要的设置。 SQL> select SUPPLEMENTAL_LOG_DATA_min from v$database; SUPPLEMENTAL_LOG ---------------- YES

alter database add supplemental log data; 做完之后,切换日志使得附加日志生效。

SQL> alter system archive log current; System altered.当然我们希望在源端和目标端的数据库都配置一个数据库用户。OGG是宣称不需要触发器,中间表,增量标记和时间戳字段的。

源端的配置数据库用户的脚本如下:

create user ogg_source identified by oracle default tablespace users;
 grant alter session to ogg_source;
 grant create session to ogg_source;
 grant connect to ogg_source;
 grant resource to ogg_source;
 grant select any dictionary to ogg_source;
 grant select any table to ogg_source;
 grant flashback any table to ogg_source;
 grant alter any table to ogg_source;

目标端配置数据库用户的脚本如下:

 create user ogg_target identified by oracle default tablespace users;
 grant alter session to ogg_target;
 grant create session to ogg_target;
 grant connect to ogg_target;
 grant resource to ogg_target;
 grant select any dictionary to ogg_target;
 grant select any table to ogg_target;
 grant flashback any table to ogg_target;
 grant alter any table to ogg_target;
 grant insert any table to ogg_target;
 grant update any table to ogg_target;
 grant delete any table to ogg_target;

添加一个表日志:

> EDIT PARAMS ./GLOBALS
GGSCHEMA ogg_source
CHECKPOINTTABLE ogg_source.CHKPTAB

在源端使用数据库用户登录

1> dblogin userid ogg_source,password oracle Successfully logged into database. 为所有要复制的表添加trandata,目前我需要复制的是newtest2这个数据库下的n1用户

2> add trandata n1.*; ERROR: No viable tables matched specification.

这个时候就会明显感觉到OGG的格式不大喜欢结尾符,得去掉结尾符才可以。

3> add trandata n1.* 2016-11-11 14:13:05 WARNING OGG-06439 No unique key is defined for table A. All viable columns will be used to represent the key, but may not guarantee uniqueness. KEYCOLS may be used to define the key. Logging of supplemental redo data enabled for table N1.A. TRANDATA for scheduling columns has been added on table 'N1.A'. 不过抛出来下面的错误,是权限不够,还需要附一个权限。

2016-11-11 14:13:05 WARNING OGG-00706 Failed to add supplemental log group on table N1.A due to ORA-06550: line 1, column 7: PLS-00201: identifier 'DBMS_CAPTURE_ADM' must be declared ORA-06550: line 1, column 7: PL/SQL: Statement ignored SQL BEGIN DBMS_CAPTURE_ADM.PREPARE_TABLE_INSTANTIATION(table_name => '"N1"."A"', supplemental_logging => 'none'); END; 解决方法:

SQL> grant execute on sys.DBMS_CAPTURE_ADM to ogg_source; Grant succeeded. 再次运行就没有问题了。 然后连接到数据库,开始配置抽取进程

14> dblogin userid ogg_source,password oracle Successfully logged into database.

配置参数,使用本地的方式。

15> edit params ext_1 EXTRACT EXT_1 USERID ogg_source, PASSWORD oracle EXTTRAIL /home/oracle/ogg/ogg_work/dirdat/ss TABLE N1.*;添加抽取进程,从数据库日志中抓取数据。

> ADD EXTRACT EXT_1, TRANLOG, BEGIN NOW EXTRACT added.

配置本地队列,然后启动

> ADD EXTTRAIL /home/oracle/ogg/ogg_work/dirdat/ss, EXTRACT EXT_1

> start EXT_1 Sending START request to MANAGER ... EXTRACT EXT_1 starting

配置完成之后,就可以查看是否能够正常抽取了,可以看到是没有正常启动。状态现在还是STOPPED

> info EXT_1 EXTRACT EXT_1 Initialized 2016-11-11 16:16 Status STOPPED Checkpoint Lag 00:00:00 (updated 00:01:22 ago) Log Read Checkpoint Oracle Redo Logs 2016-11-11 16:16:04 Seqno 0, RBA 0 SCN 0.0 (0)在11g中没有配置和OGG相关的数据库参数,就会抛出如下的问题了.

2016-11-11 16:17:11 ERROR OGG-02091 Oracle GoldenGate Capture for Oracle, ext_1.prm: Operation not supported because enable_goldengate_replication is not set to true. 2016-11-11 16:17:11 ERROR OGG-01668 Oracle GoldenGate Capture for Oracle, ext_1.prm: PROCESS ABENDING.修复之后,重新启动,这个问题就迎刃而解了,查看这个抽取进程的状态,可以看到已经有了状态数据。 > info ext_1 EXTRACT EXT_1 Last Started 2016-11-11 16:20 Status RUNNING Checkpoint Lag 00:04:49 (updated 00:00:03 ago) Process ID 53455 Log Read Checkpoint Oracle Redo Logs 2016-11-11 16:16:04 Seqno 9416, RBA 8206848 SCN 0.0 (0)然后开始在源端配置PUMP进程,目标数据库的IP是10.127.2.32,PASSTHRU代表是一个传输进程data pump

> edit params dpump_1 EXTRACT dpump_1 PASSTHRU RMTHOST 10.127.2.32, MGRPORT 1530 RMTTRAIL /home/oracle/ogg/ogg_work/dirdat/ss TABLE n1.*;

> ADD EXTRACT dpump_1,EXTTRAILSOURCE /home/oracle/ogg/ogg_work/dirdat/ss EXTRACT added. > ADD RMTTRAIL /home/oracle/ogg/ogg_work/dirdat/ss, EXTRACT dpump_1 RMTTRAIL added.

配置完成之后,启动PUMP进程。 > start dpump_1 Sending START request to MANAGER ... EXTRACT DPUMP_1 starting查看DUMP进程的信息如下:

> info dpump_1 EXTRACT DPUMP_1 Last Started 2016-11-11 16:24 Status RUNNING Checkpoint Lag 00:00:00 (updated 00:00:04 ago) Process ID 53479 Log Read Checkpoint File /home/oracle/ogg/ogg_work/dirdat/ss000000000 First Record RBA 0

对于OGG如果估计最常用的就是info all这个命令了。

> info all
 Program     Status      Group       Lag at Chkpt  Time Since Chkpt
 MANAGER     RUNNING                                           
 EXTRACT     RUNNING     DPUMP_1     00:00:00      00:00:07    
 EXTRACT     RUNNING     EXT_1       00:00:00      00:00:00

源端配置完成,我们来配置目标端。 添加表日志:

> edit param ./GLOBALS GGSCHEMA ogg_target CHECKPOINTTABLE ogg_target.CHKPTAB

登录到数据库端:

> dblogin userid ogg_target,password oracle Successfully logged into database.

目标端配置检查点:

> add checkpointtable ogg_target.CHKPTAB

Successfully created checkpoint table ogg_target.CHKPTAB

配置投递队列参数,将数据应用到目标库,这里有个映射关系,就是源库的n1.*和目标库的n1.*是对应的。

> edit params rep_1 REPLICAT REP_1 USERID ogg_target, PASSWORD oracle ASSUMETARGETDEFS HANDLECOLLISIONS MAP n1.*,TARGET n1.*; 添加投递队列

> ADD REPLICAT REP_1, EXTTRAIL /home/oracle/ogg/ogg_work/dirdat/ss,CHECKPOINTTABLE ggs_target.CHKPTAB REPLICAT added.

这里自己给自己埋了一个坑,先不说破了。看看下面的错误。

启动投递应用进程,但是发现却有报错。

> start REP_1 Sending START request to MANAGER ... REPLICAT REP_1 starting

错误提示是比较奇怪的,怎么用户名密码错误了。

Delivery for Oracle, rep_1.prm: OCI Error beginning session (status = 1017-ORA-01017: invalid username/password; logon denied),还有SYS.DBMS_STREAMS的访问权限不足

下面这个地方错误花了些时间来分析,最后才发现是自己把用户名写错了。

先删除,再添加

>delete replicat rep_1 添加的语句如下ogg_target.CHKPTAB是主要的地方,自己给写错为ggs_target了。

> ADD REPLICAT REP_1, EXTTRAIL /home/oracle/ogg/ogg_work/dirdat/ss,CHECKPOINTTABLE ogg_target.CHKPTAB REPLICAT added.

再次启动就没有问题了。

> start REP_1 Sending START request to MANAGER ... REPLICAT REP_1 starting

启动成功后的状态是这样的。 > INFO REP_1 REPLICAT REP_1 Last Started 2016-11-11 17:02 Status RUNNING Checkpoint Lag 00:00:00 (updated 00:00:02 ago) Process ID 69571 Log Read Checkpoint File /home/oracle/ogg/ogg_work/dirdat/ss000000000 First Record RBA 0不过这个过程中,目标库还没有初始数据所以还无法同步,我们应该在目标库先初始基础数据,通过exp/imp,expdp/impdp都可以。 同步之后来简单来一个小的测试。

在源端删除表test_lock的数据

SQL> delete from test_lock; 99 rows deleted. SQL> commit; Commit complete.

然后在源端查看,可以看到抽取进程的SCN开始变化

2016-11-11 17:15:04 Seqno 9417, RBA 729600 SCN 0.17848618 (17848618) 稍等一会就变为 2016-11-11 17:17:25 Seqno 9417, RBA 841728 SCN 0.17848776 (17848776) 然后查看目标端,开始是有数据的

SQL> select count(*)from test_lock;
   COUNT(*)
 ----------
         99

稍作等待,就可以看到数据被删除了。

 SQL> /
   COUNT(*)
 ----------
          0   
本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2016-11-11,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 杨建荣的学习笔记 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
数据库
云数据库为企业提供了完善的关系型数据库、非关系型数据库、分析型数据库和数据库生态工具。您可以通过产品选择和组合搭建,轻松实现高可靠、高可用性、高性能等数据库需求。云数据库服务也可大幅减少您的运维工作量,更专注于业务发展,让企业一站式享受数据上云及分布式架构的技术红利!
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档