Golden Gate 概述
概述:
- 是什么?Oracle GoldenGate 提供异构环境间事务数据的实时、低影响的捕获、路由、转换和交付。
- 非侵入:
- 不建触发器,不建中间表,无需增量标记或时间戳字段
- 不在源表上进行数据查询
- 低影响:
- 直接部署和运行在源端数据服务器时,CPU使用率<3%,内存和网络带宽要求极低
- 高实时:
- 单条数据同步链路可以持续维持>160GB/小时的数据库日志处理能力,同步延迟在10秒之内
- 异构的源和目标:
- 广泛支持异构硬件平台和操作系统下的多种不同数据库类型及版本,包括文件和消息队列
- 可靠性和事务完整:
- 保障事务完整性和顺序
- 失败后自动从断点恢复,数据不重复、不遗漏
- 非侵入:
- 应用场景:
- 异构源:
- 基于日志,实时抓取
- Message Bus
- 目标:
- 零停机移植升级,容灾应急:新的DB/OS/HW/APP
- 灵活的高可用性:全面活动的分布数据库
- 查询卸载/分流:报表数据库
- Oracle 的ETL方案,ODI
- 实时BI/实时DW:EDW
- 数据分布:多数据中心
- SOA/EDA:Message Bus: BPM/BAM/CEP
- 特点:
- 标准化的单一的技术解决多种不同的需求
- 国内:主要场景用于系统的连续可用性和报表/BI系统的实时数据访问的要求。
- 附加值高,灵活性高,好东西!
- 如果在对OGG的深入理解的基础上,应用规范,就会避免经常abend。
- 异构源:
- 基本原理:基于日志捕获技术的实时增量数据集成
- 捕获EXTRACT:通过读取事务日志,在事务发生时捕获(也可过滤)提交的事务。任何非实际事务均不被复制到目标,保证不传播错误。
- 队列TRAIL:准备数据,使数据排入队列以备路由。这个也叫Trail文件
- 传输PUMP:分发数据以便路由到目标,可实现一次捕获多次投递。
- 路由TCPIP:压缩、加密数据以便路由到目标,最小化的带宽占用。(压缩比很高1/10)
- 交付REPLICAT:保证事务数据完整,根据需要转换数据。
- 可靠性:
- 确保事务完整性
- GoldeGate的故障
- 进程故障 -> 进程自动重启
- Trail文件故障 – –> Checkpoint
- GoldenGate以外的故障
- 服务器/DB/网络的故障 –> Checkpoint

- 灵活性:数据的加工、拓扑的灵活、异构的支持、安装配置的灵活
- 可以配置Filter/Map以及转换规则的组件
- Capture
- Datapump
- Replicat
- 每个组件的安装时是灵活的,不同于其他产品;
- 每个组件的配置也是灵活的,只要trail文件、checkpoint信息在,想怎么玩就怎么玩!

- 可以配置Filter/Map以及转换规则的组件
- 拓扑结构
- 分析型:
- 单向,查询分流,一对一
- 合并,实时BI,三对一
- 集成,整合;实时数据仓库ODS--》EDW;三对一对一. OLTP—ODS—EDW
- 操作型:
- 双向,1对1
- 广播,1对多
- 对等,负载均衡;三角形双向
- 级联,分布式业务;一对一,然后对三
- 分析型:
- 产品线:
- Oracle Goldengate(凡是安装的都需要license,RAC每个节点都需要license)
- Management Pack for Goldengate
- Director
- Monitor
- EM12c plug-in
- Goldengate Veridata(不能脱离OGG环境)
- Goldengate Application Adapter
- 产品下载:
- support.oracle.com - 11g的patch即安装包 (12c不是)
Golden Gate 概述的更多相关文章
- Oracle Golden Gate概要
Oracle GoldenGate简介 Oracle Golden Gate用于源数据库与目标数据库的数据复制备份:可以在异构的环境(各种操作系统和数据库)之间实现数据亚秒级的实时复制备份:以及可以在 ...
- Oracle Golden Gate - 概念和机制 (ogg)
Golden Gate(简称OGG)提供异构环境下交易数据的实时捕捉.变换.投递. OGG支持的异构环境有: OGG的特性: 对生产系统影响小:实时读取交易日志,以低资源占用实现大交易量数据实时复制 ...
- 转://Oracle Golden Gate 概念和原理
引言:Oracle Golden Gate是Oracle旗下一款支持异构平台之间高级复制技术,是Oracle力推一种HA高可用产品,简称“OGG”,可以实现Active-Active 双业务中心架构 ...
- [转载]Oracle Golden Gate - 概念和机制 (ogg)
出处:https://www.cnblogs.com/qiumingcheng/p/5435907.html Golden Gate(简称OGG)提供异构环境下交易数据的实时捕捉.变换.投递. OGG ...
- Oracle Golden Gate原理简介
Oracle Golden Gate原理简介 http://www.askoracle.org/oracle/HighAvailability/20140109953.html#6545406-tsi ...
- Golden Gate 相关组件介绍:
OGG组件: Manager: 启动其它进程 Collector Extract Data Pump:可选进程,建议使用 Replicat Trails: 可以压缩,加密 Checkpoint OGG ...
- Sybase to Oracle Golden Gate
Sybase 安装Golden Gate: 下载,然后create subdirs.并且在两端配置好mgr,设置好端口7809 创建golden gate用户ogguser,并且给它授权sa和repl ...
- Golden Gate 概念和机制
1. OGG有哪些进程 ü Manger : manger进程是goldengate的控制进程,分别运行在源端和目标端上,它主要的作用是启动.监控.重启goldengate的其他进程,报告错误及事件 ...
- golden gate 加initial load 在rac 上的配置
前言goldengate 11g 在oracle 11g rac 上的配置 (源是rac+asm , 目标是单数据库实例) 源端: 1. 配置tnsnames [oracle@rac1 admin]$ ...
随机推荐
- ES : 软件工程学的复杂度理论及物理学解释
系统论里面总是有一些通用的专业术语 比如复杂度.熵.焓,复杂度专门独立出来,成为复杂度理论 文章摘抄于:<非线性动力学> 刘秉政 编著 5.5 复杂性及其测度 热力学的几个专业术语 熵. ...
- C# 生成Model和DAL
using Model; using System.Collections.Generic; using System.Text; public class Class1 { #region 生成Mo ...
- layer弹出框的用法
页面中引入 layer.js 就行了 1.弹出一个提示信息: layer.msg("我是哦提示信息"); 2.弹出一个带选择的按钮的框 layer.open({ title: ' ...
- 前端自动化构建yeoman
前端自动化可分为: yo(脚手架工具).grunt(构建工具).bower(包管理器). OMAN的特性 http://yeoman.io/learning/ 闪电般的初始化:项目开始阶段,可以基 ...
- 40 最小的K个数(时间效率)
题目描述: 输入n个整数,找出其中最小的K个数.例如输入4,5,1,6,2,7,3,8这8个数字,则最小的4个数字是1,2,3,4,. 测试用例: 功能测试(输入的数组中有相同的数字:输入的数组中 ...
- RE:ゼロから始める文化課生活
觉得有必要在NOI之前开一篇学习内容记录. 至于为什么要取这个标题呢?也许并没有什么特殊的借口吧. 5.23 在LOJ上搬了三道原题给大家考了考,然后大家都在考试就我一个人在划水. SSerxhs 和 ...
- STM32 ADC多通道转换DMA模式与非DMA模式两种方法(HAL库)
一.非DMA模式(转) 说明:这个是自己刚做的时候百度出来的,不是我自己做出来的,因为感觉有用就保存下来做学习用,原文链接:https://blog.csdn.net/qq_24815615/arti ...
- 【ACM-ICPC 2018 沈阳赛区网络预赛 I】Lattice's basics in digital electronics
[链接] 我是链接,点我呀:) [题意] [题解] 每个单词的前缀都不同. 不能更明示了... 裸的字典树. 模拟一下.输出一下就ojbk了. [代码] #include <bits/stdc+ ...
- Could not publish server configuration for Tomcat v7.0 Server at localhost. Multiple Contexts have a path of "/ezoutdoor".
Could not publish server configuration for Tomcat v7.0 Server at localhost. Multiple Contexts have a ...
- tomcat设置编码utf8
1. Java类: CharacterEncodingFilter import javax.servlet.*; import java.io.IOException; public ...