源端和目标端的文件不一样，目标端需要下载Oracle GoldenGate for Big Data,源端需要下载Oracle GoldenGate for Oracle！
在这篇文章开始之前，先跟大家推荐一位 PG 大佬公众号，一直深耕 PostgreSQL 多年，混迹于各大互联网公司和各种大会，也属于数据库老司机，云计算泥石流，开源 RDS —— Pigsty 大本营，感兴趣的朋友可以关注下。
版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/53895301
今天试了下搭建GoldenGate，搭建的过程也简单总结了一下。 目前源数据库是newtest2 目标数据库是dataguru 都是11.2.0.4.0版本 关于GoldenGate的下载可以到下面的链接下载 http://www.oracle.com/technetwork/middleware/goldengate/downloads/index.html 在11g中，存在一个和GoldenGate有关的参数，默认是false,我们需要在源库，目标库都开启 SQL> show parameter
刚接触OGG的时候，很容易被众多的版本搞晕，虽然官方有提供各版本对应认证OS和DB的表格。 个人认为一个比较简单的方式，是直接去edelivery.oracle.com下载OGG，选定一个大版本后，这里以11.1（一个较旧的版本，这里只是举例说明），再选择自己可能用到的OS，得出的列表如下：
OGG学习笔记01-基础概述 OGG(Oracle Golden Gate),最近几年在数据同步、容灾领域特别火，甚至比Oracle自己的原生产品DataGuard还要风光，主要是因为其跨平台、跨数据库、跨版本的强大特性。
Automatic archival是Disabled状态，因为Oracle默认是不开启自动归档的
OGG 微服务架构(Microservices Architecture)起始于12.3版本，采用各种服务来管理，通过WEB接口来创建进程、启动进程以及管理底层进程等操作以及具备完善监控功能包括进程、线程等性能数据,以前非微服务架构称为经典架构(Classic Architecture)。
OGG（Oracle GoldenGate）属于Oracle Fusion Middleware产品线，2009年被Oracle收购，它是Oracle Stream的替代者。OGG软件是一种基于日志的结构化数据复制备份软件，它通过解析源数据库在线日志或归档日志获得数据的增量变化，再将这些变化应用到目标数据库，从而实现源数据库与目标数据库的同步。OGG可以在异构的IT（Information Technology，信息技术）基础结构（包括几乎所有常用操作系统平台和数据库平台）之间实现大量数据亚秒级的实时复制，从而可以在应急系统、在线报表、实时数据仓库供应、交易跟踪、数据同步、集中/分发、容灾、数据库升级和移植、双业务中心等多个场景下应用。同时，OGG可以实现一对一、广播（一对多）、聚合（多对一）、双向复制、层叠、点对点、级联等多种灵活的拓扑结构。
先说为啥是第二版呢，这里有两个原因，一是因为第一版大概是去年这个时候写的，没有考虑到序列同步的问题，如果你的数据库使用了序列，第一版是没有配置序列实时同步的，这样就导致了迁移完成后如果不单独导入系列，业务就没法使用，所以还需要处理序列。第二个原因是因为去年写的第一版大概是因为封面图使用了 O 注册商标，还是说文章抄袭了 O 享有的著作权，被北京某德事务所投诉，微信直接删除了这篇文章并清除了我历史关键字回复功能。。。点背，没办法，我也没办法申诉，只能默默认了。下面开始正文：
1、若源端OGG版本低，目标端OGG版本高，则此种配置不需要做任何的额外改动，跟两端是相同OGG版本的同步是完全一样的参数设置。
环境：参考：OGG学习笔记02-单向复制配置实例 实验目的：了解OGG简单故障的基本处理思路。
当所有在Extract 启动之前的开始的交易都完成后，我们就可以使用RMAN 备份生产 端的数据库了。备份数据库的过程中一定要密切监控Extract 进程的状态，保证其一 直正常运行：
昨天使用GoldenGate同步数据，数据量玩得有些大了。最后发现很多小问题变得更加严峻，比如空间问题。 而且由于没有更多的经验，导致这个问题被我引入了另外一个极端。 查看目标端的空间，一个临时创建的目录一下子满了，得清理一下空间了。 [oracle@newtest ogg_10g]$ df -h Filesystem Size Used Avail Use% Mounted on /dev/sda5 9.9G 9.4G 17M 100% / 停止了目标端的replicat进程
本文阐述了从Oracle实时同步到Hadoop集群的架构实践，分析了如何实现高效、稳定、易维护的同步方案。通过在两个集群上部署OGG，利用Oracle GoldenGate技术实现数据的实时同步，并阐述了如何通过业务逻辑编排实现多个集群之间的数据同步。同时，本文还提供了同步后的数据治理方案，以保障数据的一致性和可用性。
https://cloud.tencent.com/developer/article/1004462
那就是连接的问题了, 比如密码插件之类的(很遗憾插件改为mysql_native_password还是相同的报错)
OGG有传统的经典架构，也有最新的微服务，2个都可以远程捕获和应用数据，对数据库服务器是0侵入，而传统的经典架构是纯命令行模式，最新的微服务架构是图形化界面操作，几乎所有操作都可以在界面进行。
大神们在群里讨论微服务的高可用,主要是XAG不支持adminclient接口,只支持ggsci接口,经过查看官方文档说明,最新版本XAG已经支持adminclient接口,ORACLE CLUSTER不仅仅支持ORACLE DATABASE也可以来管理各种资源实现高可用,OGG高可用管理主要依赖XAG插件。本文主要讲述如何通过ORACLE CLUSTER加上XAG实现OGG Microservices微服务的高可用。
OGG有传统的经典架构，也有最新的微服务，2个都可以远程捕获和应用数据，对数据库服务器是0侵入，而传统的经典架构是纯命令行模式，最新的微服务架构是图形化界面操作，几乎所有操作都可以在界面进行。相关文章可以参考：
虽说OGG VORBIS的登场并未晚过前辈MP3过多时日，其的出现也正是为了阻拦MP3一路高歌猛进的强劲步伐，可是至少在中国这块破解软件的乐土，MP3虚有其表的版权以及真真切切的封闭却并未驱使人们义无反顾的投身OGG VORBIS的怀抱，尽管他完全的开源，尽管他彻底的免费，虽说在Linux平台上Ogg Vorbis的确流行，但是在中国这片Windows大放异彩的土地上，能够耳闻Ogg Vorbis名号的人估计也不在多数，笔者曾经在网上搜索过Ogg Vorbis相关的文章，大抵都是一些浮光掠影的简介，有些内容的也大多以英文写就，读来确有不便，再加上我在学习游戏编程的过程中对Ogg Vorbis有过一点浅显的认识，所以萌生了写作此文的想法，但文章终究是我的个人看法，期中讹误在所难免，希望大家对于其中不便于理解或者认为错误的地方一一指出，以使我进一步修正改进，总的来说我必须为那句“古语”负责：贻笑大方事小，误人子弟事大：）
目前，比较常用的数据同步软件有 CDC（Oracle Change Data Capture 变更数据捕获）、迪思杰（DSG）、九桥软件 DDS、OGG 、Debezium、Flink CDC、阿里 dataX 等等，今天在来聊聊 OGG 基础知识（注意：以下为两年前的旧文分享）。之前也有关于 OGG 基础知识的介绍文章，感兴趣的可点此链接查看。
准备工作：打开虚拟机端的Oracle Linux Server 6.9的系统，然后使用root用户登录。打开终端界面，输入ifconfig -a查看IP地址。
架构 环境准备 -- 创建专用网络 docker network create --subnet=172.72.6.0/24 pg-network -- PG A docker rm -f lhrpga docker run -d --name lhrpga -h lhrpga \ -p 64320:5432 --net=pg-network --ip 172.72.6.20 \ -e POSTGRES_PASSWORD=lhr \ -e TZ=Asia/Shanghai \
源端环境：RHEL 6.5 + Oracle 11.2.0.4 RAC + OGG 19.1.0.0.4 目标端环境：RHEL 7.6 + Oracle 19.3 + OGG 19.1.0.0.4 故障现象：源端表结构某字段数据类型长度增加，并插入对应数据，目标端因还是之前的数据类型长度，导致应用进程无法更新对应数据进而导致ABENDED，一般来说，只需目标端依据源端修改为一致的字段长度即可，但这里发现依然会ABENDED，且报错信息不变。
https://blog.csdn.net/m0_50546016/article/details/112525017
说 明：源端 Oracle 数据库版本 19c, ogg 19.1 源端也可以是 11.2.0.4 db,ogg 版本 12.3.0.1.2 目标端：Kafka 版本 kafka_2.11-2.0.0(本次不涉及) ogg for bigdata 12.3.2.1.1
Oracle Goldengate（以下简称OGG）是业界广泛使用的准实时数据复制软件，主要基于数据库日志进行变更数据的抽取，也就是我们常说的CDC（change data capture）的能力，Goldengate的优势主要体现支持各种异构环境下的数据复制，对生产库的影响最低（基于日志读取，非Sqoop这样直接查询数据的方式，同时可以支持remote capture）。
传统 HTML 开发中 , 如果想要向网页中嵌入音频和视频 , 需要 使用 Flash 浏览器插件才能实现 ;
PURGEOLDEXTRACTS /ogg/dirdat/horcl/hz*,USECHECKPOINTS,MINKEEPDAYS 2
https://edelivery.oracle.com/osdc/faces/SoftwareDelivery
最近有朋友反馈说OGG所在磁盘空间满，手动清理磁盘空间后，无法启动OGG进程，当时想想不应该，以前遇到很多次，空间满后，手动清理空间，如果mgr配置自启动或者手动启动进程，都是瞬间搞定。朋友说关闭mgr后，重启进程还是一样是abend状态，但是查看进程日志却无任何日志输出。
OGG简介（GoldenGate） OGG 是一种基于日志的结构化数据复制软件 OGG 能够实现大量交易数据的实时捕捉，变换和投递，实现源数据库与目标数据库的数据同步，保持最少10ms的数据延迟。
环境操作系统 centos6.5openssl版本: 1.0.1eogg版本 19.1MYSQL版本: 5.7.35报错配置抽取进程的时候,启动报错如下2022-06-23 05:54:53 WARNING OGG-00769 MySQL Login failed: . SQL error (2026). SSL connection error: error:100AE081:elliptic curve routines:EC_GROUP_new_by_curve_name:unknown gro
已经将kafka消费的数据转换成了OggMessageBean或者CanalMessageBean对象，每条数据对应着某张表的操作记录。
今天对GoldenGate的数据同步进一步做了测试，发现在一些模拟真实的场景中，需要考虑的因素要更多更为复杂。简单同步几条，几百条数据的测试同步做验证测试可以，但是很难测试出来一些潜在的问题，今天碰到了一些问题，基本都得到了解决。 首先要测试的这个环境数据要多一些。导出了一个测试环境的数据进行OGG的复制演练。 test@TESTDB> select table_type from cat group by table_type TABLE_TYPE ----------- TABLE VIEW SYNON
从去年开始便一直使用的是 ogg 19c，但今年年中时候发现 Oracle 官方居然将 Linux x64 位的 ogg 下载链接下架了，不知为何无法下载到这个版本了（PS：有需要的前去我的墨天轮地址下载：https://www.modb.pro/download/761440），微服务版本也没有了，现在只能从官网看到 21c 的安装包。
字段映射关系请参考： https://blog.csdn.net/weixin_34128839/article/details/91644197
查看目标端的SCN号，记录该SCN号（得到该SCN号之后，启动复制进程时，使⽤该SCN号）
Oracle11gR2的具体版本是11.2.0.1.0，适用于64位的Linux平台，包含两个软件包，名称分别为：
如上图所示，OGG主要包含Manager进程、Extract进程、Pump进程、Replicat进程，下面对其进行说明：
chown -R oracle:oinstall /u01/app/oracle/oggdata/orcl
前面几天发布了一篇使用 OGG 21c 遇到的几个问题之后，居然在新的周一后又发现了一个与 OGG 相关的问题，那是什么问题呢？且听小哥我慢慢道来。说来也简单就是使用 OGG21c 在中间机配置好了远程捕获 EXTRACT 进程，将数据导入到目标端 19c 后，源端捕获进程有很大的延迟，按照这个延迟来看，本地的归档日志也都删除了，可这个捕获进程呢没有任何报错，延迟一直在增大。
不同的浏览器支持不同的音频格式，目前好像还没有哪一种格式获得所有浏览器的支持。如果要做到兼容，需要支持字少两种格式：
场景1:数据库SWITCHOVER切换之前停止OGG CLASSIC EXTRACT进程,切换之后修改OGG访问新主库,OGG EXTRACT进程RBA不移动也不会报错.
OGG学习笔记04-OGG复制部署快速参考 源端：Oracle 10.2.0.5 RAC + ASM 节点1 Public IP地址：192.168.1.27
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
