实时数仓实践(二)OGG同步到kafka

实时数仓实践(二)OGG同步到kafka引用 https blog csdn net article details ogg 即 Oracle GoldenGate 是 Oracle 的同步工具 本文讲如何配置 ogg 以实现 Oracle 数据库增量数据实时同步到 kafka 中 其中同步消息格式为 json 身份 hostname

大家好,我是讯享网,很高兴认识大家。

引用:https://blog.csdn.net/_/article/details/

ogg即Oracle GoldenGate是Oracle的同步工具,本文讲如何配置ogg以实现Oracle数据库增量数据实时同步到kafka中,其中同步消息格式为json。


讯享网

在这里插入图片描述

身份 hostname 组件和版本 IP OGG版本
源端 db-oracle oracle11g 192.168.10.101 row 1 col 2
目标端 linux121 kafka_2.12-1.0.2 192.168.10.121 row 1 col 2

实时数仓实践(二)OGG同步到kafka

    • 1.下载地址
    • 2.源端添加ogg
          • 添加环境变量
          • oracle打开归档模式
          • Oracle打开日志相关
          • oracle创建复制用户
    • 3.OGG初始化
          • Oracle创建测试表
    • 4.OGG配置
        • 目标端(kafka)配置
        • OGG源端配置
    • 5.OGG目标端配置
        • 5.1 开启kafka服务
        • 5.2 配置管理器mgr
        • 5.3 配置checkpoint
        • 5.4 配置replicate进程
        • 5.5 配置kafka.props
        • 5.6 添加trail文件到replicate进程
    • 6.测试
        • 6.1 启动所有进程
        • 6.2 异常解决
    • 7.全量数据同步配置
        • 1.配置源端数据初始化
        • 2.配置目标端数据初始化进程
        • 启动
小讯
上一篇 2025-01-08 12:23
下一篇 2025-02-28 14:53

相关推荐

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/80550.html