OGG基本原理

3 篇文章 0 订阅
订阅专栏

一.GoldenGate介绍

OGG 是一种基于日志的结构化数据复制软件
OGG 能够实现大量交易数据的实时捕捉,变换和投递,实现源数据库与目标数据库的数据同步,保持最少10ms的数据延迟

二.工作原理

在这里插入图片描述

三.相关组件

1.Manager

负责OGG 整体的监控和管理

(1).Trail文件的生成和删除

(2).定期监控进程,负责进程的启动/停止

2.Extract(Capture)

(1).从redo 或 archive log获得DB变更信息,取得主键或唯一键的变更前后的值

在这里插入图片描述
(2).以一定间隔读取REDO日志,获取变更信息

参数EOFDELAY or EOFDELAYCSECS 设置。 默认1s,最小10ms

(3).当满足下列条件时,输出到本地或远程Trail文件

  • Extract的缓冲区写满

  • 设置参数FLUSHSECS or FLUSHCSECS来指定间隔。 默认1s,最小10ms
    在这里插入图片描述

3.Extract(Pump)

将本地的Trail队列发送至目标端Collector

发送间隔,满足以下任一条件:

(1).缓存写满时

Pump的RMHOST参数(TCPBUFSIZE选项),可指定缓存尺寸,默认30000bytes

(2).参数指定

FLUSHSECS or FLUSHCSECS. 默认1s,最小10ms

在这里插入图片描述

4.Collector

从Extract pump向Collector发送,输出至Trail文件

5.Replicat

从Trail文件生成SQL语句在目标DB执行。

在这里插入图片描述

四.初始数据同步

1.利用数据库功能

RMAN,expdp/impdp

2.利用OGG功能

设置初始化属性的捕获和复制进程。建议小数据库使用。

五.限制

1.未支持的数据类型

ANYDATA,BFILE,TIMEZONE_ABBR,URITYPE,ANYDATASET,BINARY_INTEGER,TIMEZONE_REGION,UROWID,ANYTYPE,MLSLABEL,PLS_INTEGER

2.DML未支持的对象

压缩表,外部表,REF,别名,不输出日志的DML

3.未支持的DDL

对系统表/系统视图的DDL

使用Recycle Bin

4.不支持的对象名

以下字符和中文不可用于对象名:

& * ? : ; , . 空格

5.字符集

目标DB的字符集必须是源DB字符集的超集

6.其他

(1).sequence 双向复制时不能使用sequence,单向使用sequence的cache时,源和目标不同步

(2)目标DB需要删除Trigger

【云原生进阶之数据库技术】第二章-Oracle-使用-3.2.1-Oracle ogg原理剖析
junbaozi的专栏
05-26 674
OGGOracle GoldenGate)属于Oracle Fusion Middleware产品线,2009年被Oracle收购,它是Oracle Stream的替代者。OGG软件是一种基于日志的结构化数据复制备份软件,它通过解析源数据库在线日志或归档日志获得数据的增量变化,再将这些变化应用到目标数据库,从而实现源数据库与目标数据库的同步
OGG工作原理
ciqiyuan9775的博客
05-17 5587
一.GoldenGate介绍 OGG 是一种基于日志的结构化数据复制软件 OGG 能够实现大量交易数据的实时捕捉,变换和投递,实现源数据库与目标数据库的数据同步,保持最少10ms的数据延迟 二.工作原理 ...
oracle ogg原理详解
01-08
oracle 最新ogg12.3原理文档,更透彻的了解ogg同步原理
Oracle GoldenGate的思想天空--感悟OGG的本质
热门推荐
msdnchina的专栏@JiNan,ShanDong
08-02 2万+
Oracle GoldenGate的思想天空--感悟OGG的本质
OGG_GoldenGate数据迁移三进程Extract / Dump / Relicat(案例)
weixin_34345560的博客
03-04 410
2014-03-04 Created By BaoXinjian 一、摘要 1.OGG是数据同步软件,或者说是逻辑复制软件,其竞争对手有IBM CDC,DELL shareplex,DSG,DDS等等。 2.OGG软件是需要安装在操作系统上的,Oracle DB软件没有自带OGG软件(至少目前是这样的) 3.OGG软件有三大进程(说四大进程也行): 三大进程:源头抽取进程、源头传...
OGG安装及单向配置
congweixuan2858的博客
08-21 366
GoldenGate技术架构图 从图中可以看到:GoldenGate主要包含Manager进程、Extract进程、Pump进程、Replicat进程,下面对...
oracle ogg 原理,oracle goldengate体系原理简介
weixin_39588206的博客
04-07 906
关于oracle goldengate简称ogg这个产品是oracle收购goldengate软件,然后将其集成到oracle goldengate中去,ogg主要是一种基于日志的挖掘的技术,基本实现原理是通过在源端捕获数据变化的日志然后传输到远程目标数据库中再次应用该日志,从而实现源数据库和目标数据库之间的同步。相对于oracle database的原理体系,ogg从体系上来说是比较简单的,跟o...
OGGOGG基础知识整理
03-03
GoldenGate基本架构OracleGoldenGate主要由如下组件组成●Extract●Datapump●Trails●Collector●Replicat●ManagerOracleGoldenGate数据复制过程如下:利用抽取进程(ExtractProcess)在源端数据库中读取...
OGG文档以及机器翻译
04-22
通过阅读此文档,你可以了解OGG的基本概念、安装步骤、配置过程、数据提取、数据泵送和数据加载的详细操作,以及如何进行故障排查。由于机器翻译可能存在准确性的局限,理解时需要注意核对原文或专业术语的正确性。 ...
oracle ogg kafka 实时同步技术方案 .doc
02-05
3. 基本原理图:展示数据从 Oracle 到 Kafka 的转换和传输过程,包括数据捕获、转换、加载等步骤。 4. 名词解释:包括 OGG 过程(如 Extract、Replicat)、Kafka 概念(如 Producer、Consumer、Topic)等关键术语的...
OGG工作原理(Oracle Golden Gate)
liinux-Talk is cheap,show me the code.
04-07 2395
一.GoldenGate介绍 OGG 是一种基于日志的结构化数据复制软件 OGG 能够实现大量交易数据的实时捕捉,变换和投递,实现源数据库与目标数据库的数据同步,保持最少10ms的数据延迟二.工作原理 三.相关组件 1.Manager 负责OGG 整体的监控和管理 (1).Trail文件的生成和删除 (2).定期监控进程,负责进程的启动/停止 2.Extract(Capture) ...
OGG技术原理简述
杨志浩的博客
12-02 2万+
OGG相关整理OGG架构Capture(Local Extract)ProcessLocal Extract进程特点Source TrailSource Trail进程特点Data PumpCollectorRemote Trail发布(Delivery,Repalicate)管理器和组进程检查点(checkpoint)环境要求源数据库需求目标数据库需求GG实战单向复制实践概述GG配置典型拓扑结构...
OGG原理
weixin_33955681的博客
09-24 1368
OGG软件是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志或归档日志获得数据的增量变化,再将这些变化应用到目标数据库,从而实现源数据库与目标数据库同步OGG可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制,从而在可以在应急系统、在线报表、实时数据仓库供应、交易跟踪、数据同步、集中/分发、容灾等多个场景下应用...
OGG主要进程理解
Dillon Oracle博客
08-28 3930
基础知识: GoldenGate主要包含Manager进程、Extract进程、Pump进程、Replicat进程,下面对其一一说明: Manager进程是GoldenGate的控制进程,它主要作用有以下几个方面:启动、监控、重启GoldenGate的其他进程,报告错误及时间,分配数据存储空间,发布阀值报告等。 Extract进程运行在数据库源端,负责从源端数据表或日志中捕获数据。Extra
ogg mysql的原理_OGG原理
weixin_36263314的博客
02-08 274
OGG软件是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志或归档日志获得数据的增量变化,再将这些变化应用到目标数据库,从而实现源数据库与目标数据库同步OGG可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制,从而在可以在应急系统、在线报表、实时数据仓库供应、交易跟踪、数据同步、集中/分发、容灾等多个场景下应用。OGG的数据集成技术...
OGG基础原理了解
clwdmlt223942的博客
08-07 825
一、 GoldenGate介绍 GoldenGate软件是一种基于日志的结构化数据复制软件。GoldenGate 能够实现大量交易数据的实时捕捉、变换和投递,实现源数据库与目标...
ogg mysql的原理_OGG概念与机制
weixin_39717825的博客
01-28 368
OGG:Oracle Golden Gate??简称为OGG,提供异构环境下的数据的实时捕捉,变换和投递。1.OGG的特点:对生产环境影响较小,因其实时读取交易日志从而实现了用最小的资源占用解决了大交易量数据的实时复制。以交易为单位复制,保证交易的一致性实现了只同步提交的数据。高性能,智能的交易重组和操作合并,使用数据库本地接口访问,并行处理体系,灵活的拓扑结构:支持一对一、一对多、多对一、多对多...
0832工作原理详解_详解OGG工作原理
weixin_29315569的博客
01-12 148
GoldenGate介绍OGG 是一种基于日志的结构化数据复制软件OGG 能够实现大量交易数据的实时捕捉,变换和投递,实现源数据库与目标数据库的数据同步,保持最少10ms的数据延迟。工作原理相关组件1.Manager负责OGG 整体的监控和管理(1).Trail文件的生成和删除(2).定期监控进程,负责进程的启动/停止2.Extract(Capture)(1).从redo 或 archive lo...
ogg mysql的原理_Oracle GoldenGate(OGG)诊断
weixin_36477752的博客
02-08 171
这篇文档简要地列出了在使用 Oracle GoldenGate(OGG)时常见的问题以及诊断的步骤和工具。它描述了查找 OGG 组*失败原因的关键文这篇文档简要地列出了在使用 Oracle GoldenGate(OGG)时常见的问题以及诊断的步骤和工具。它描述了查找 OGG 组*失败原因的关键文件。理解 OGG 怎样捕获和传输数据有助于理解为何会发生问题以及如何避免这些问题。正确的安装和配置 OG...
写文章

热门文章

  • OGG中的附加日志 3881
  • OGG基本原理 1784
  • 关于dblink的实现 701
  • 关于expdp/impdp的简单数据泵导入导出命令 689
  • 表空间使用率过高,添加数据文件 347

分类专栏

  • ORACLE_OGG 3篇
  • SQL server
  • ORACLE 6篇
  • ORACLE_DG

最新文章

  • defgen
  • JOB
  • 表空间使用率过高,添加数据文件
2020年2篇
2019年7篇

目录

目录

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值

玻璃钢生产厂家滁州景区玻璃钢雕塑定制通用玻璃钢花盆开发青海抽象人物玻璃钢雕塑多少钱红河玻璃钢花盆韶关玻璃钢园林雕塑景洪市玻璃钢雕塑设计公司玻璃钢雕塑的保养方法佛山景观玻璃钢雕塑价格河北玻璃钢卡通雕塑猴子商场装饰玻璃钢卡通雕塑销售厂家玻璃钢卡通动物雕塑艺术摆件高质量玻璃钢雕塑批发亳州多彩玻璃钢雕塑珠海玻璃钢雕塑费用是多少北京常用商场美陈生产厂家玻璃钢天猫雕塑工厂阳江品牌玻璃钢雕塑杭州商场美陈市场济宁制作玻璃钢雕塑报价厂商可爱的玻璃钢雕塑玻璃钢花盆雕塑厂家电话湖北酒店艺术玻璃钢雕塑厂家玻璃钢动物雕塑厂家定制南京拉丝玻璃钢雕塑省钱福建商场美陈销售厂家天津创意玻璃钢雕塑设计蒙古玻璃钢马雕塑合肥景区玻璃钢雕塑校园玻璃钢人物雕塑价格合理玻璃钢雕塑定制产品应用香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声单亲妈妈陷入热恋 14岁儿子报警汪小菲曝离婚始末遭遇山火的松茸之乡雅江山火三名扑火人员牺牲系谣言何赛飞追着代拍打萧美琴窜访捷克 外交部回应卫健委通报少年有偿捐血浆16次猝死手机成瘾是影响睡眠质量重要因素高校汽车撞人致3死16伤 司机系学生315晚会后胖东来又人满为患了小米汽车超级工厂正式揭幕中国拥有亿元资产的家庭达13.3万户周杰伦一审败诉网易男孩8年未见母亲被告知被遗忘许家印被限制高消费饲养员用铁锨驱打大熊猫被辞退男子被猫抓伤后确诊“猫抓病”特朗普无法缴纳4.54亿美元罚金倪萍分享减重40斤方法联合利华开始重组张家界的山上“长”满了韩国人?张立群任西安交通大学校长杨倩无缘巴黎奥运“重生之我在北大当嫡校长”黑马情侣提车了专访95后高颜值猪保姆考生莫言也上北大硕士复试名单了网友洛杉矶偶遇贾玲专家建议不必谈骨泥色变沉迷短剧的人就像掉进了杀猪盘奥巴马现身唐宁街 黑色着装引猜测七年后宇文玥被薅头发捞上岸事业单位女子向同事水杯投不明物质凯特王妃现身!外出购物视频曝光河南驻马店通报西平中学跳楼事件王树国卸任西安交大校长 师生送别恒大被罚41.75亿到底怎么缴男子被流浪猫绊倒 投喂者赔24万房客欠租失踪 房东直发愁西双版纳热带植物园回应蜉蝣大爆发钱人豪晒法院裁定实锤抄袭外国人感慨凌晨的中国很安全胖东来员工每周单休无小长假白宫:哈马斯三号人物被杀测试车高速逃费 小米:已补缴老人退休金被冒领16年 金额超20万

玻璃钢生产厂家 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化