Configure Extract(提取)      Process in Source system 配置capture(捕获)参数 Edit extract process parameter GGSCI (gc2) 21> EDIT PARAMS EORA_1          配置capture参数文件 -- Change Capture parameter file to capture -- EMP_OGG and DEPT_OGG changes EXTRACT EORA_1 SE…

Item Source System Target System Platform OEL5.4 OEL5.4 Hostname gc1 oraclelinux54.cuug.net Database Oracle 10.2.0.5 Oracle 11.2.0.3 Character Set Zhs16gbk Zhs16gbk ORACLE_SID PROD TDB112 Listener Name/Port LISTENER/1521 LISTENER/1521 Goldengate User…

本文转载自:http://www.cnblogs.com/evencao/archive/2013/06/14/3135529.html ETL在数据仓库中具有以下的几个特点: 数据流动具有周期性: 因为数据仓库中的数据量巨大,一般采用成熟的ETL工具去完成抽取.转换.加载,以降低设计开发的和维护的复杂度,使设计开发人员有更多的时间去专注于业务转化规则. ETL是数据抽取.转换.加载的简写.它的一般过程是将数据源抽取出来,中间经过数据的清洗.转换,最后加载到目标表中.ETL的过程一般是批量的.…

本机到本机的配置: 源端       10.1.83.144:1521/SIBP_GSDY    HNSIB_GSDY目标端   10.1.83.144:1521/SIBP_GS         HNSIB_GS进程名规划 :OBB05 源端抽取进程及文件前缀:BG01_DY    DY 目标端恢复进程:OBR01 //环境变量设置#for oggexport GG_HOME=/ogg/data export PATH=$JAVA_HOME/bin:$GG_HOME:$PATH export L…

分区和桶:   分区:可以提高查询的效率,只扫描固定范围数据,不用全部扫描 CREATE TABLE logs (ts BIGINT, lineSTRING) PARTITIONED BY (dt STRING, country STRING); 通过关键字PARTITIONED BY 定义分区表 LOAD DATA LOCAL INPATH '/home/data/file1' INTO TABLE logs PARTITION (dt='2001-01-01',country='GB');…

环境:11.2.0.3(已安装数据库实例)+OEL5.7 192.168.1.55 zlm sid:zlm11g 192.168.1.60 zlm2 sid:zlm11g 一.安装软件,配置环境,创建相关用户 1.1 下载介质并安装OGG软件 从官方网址下载最新版OGG FOR ORACLE 11g ON LINUX X86-64软件: http://www.oracle.com/technetwork/middleware/goldengate/downloads/index.html?ssS…

数据分析系统的总体架构分为四个部分 —— 源系统.数据仓库.多维数据库.客户端(图一:pic1.bmp) 其中,数据仓库(DW)起到了数据大集中的作用.通过数据抽取,把数据从源系统源源不断地抽取出来,可能每天一次,或者每3个小时一次(当然是自动的).这个过程,我们称之为ETL过程. 那么,今天,我们就来谈一谈:如何搭建数据仓库,在这个过程中都应该遵循哪些方法和原则:然后介绍一些项目实践中的技巧. 一.数据仓库的架构 数据仓库(Data Warehouse DW)是为了便于多维分析和多角度展现而将…

原文:http://huangy82.blog.163.com/blog/static/49069827200923034638409/ ETL构建企业级数据仓库五步法 在数据仓库构建中,ETL贯穿于项目始终,它是整个数据仓库的生命线,包括了从数据清洗,整合,到转换,加载等的各个过程,如果说数据仓库是一座大厦,那 么ETL就是大厦的根基,ETL抽取整合数据的好坏直接影响到最终的结果展现.所以ETL在整个数据仓库项目中起着十分关键的作用,必须摆到十分重要的位 置.一.什么是ETLETL是数据抽取(…

注:本文为原著(其内容来自 腾科教育培训课堂).阅读本文注意事项如下: 1:所有文章的转载请标注本文出处. 2:本文非本人不得用于商业用途.违者将承当相应法律责任. 3:该系列文章目录列表: 一:<OCM 基本班课程表> 二:<OCM_第一天课程:OCM课程环境搭建> 三:<OCM_第二天课程:Section1 ->配置 Oracle 网络环境 > 四:<OCM_第三天课程:Section1 ->表空间的操作和管理.服务配置 > 五:<OC…

注:本文为原著(其内容来自 腾科教育培训课堂).阅读本文注意事项如下: 1:所有文章的转载请标注本文出处. 2:本文非本人不得用于商业用途.违者将承当相应法律责任. 3:该系列文章目录列表: 一:<OCM 基本班课程表> 二:<OCM_第一天课程:OCM课程环境搭建> 三:<OCM_第二天课程:Section1 ->配置 Oracle 网络环境 > 四:<OCM_第三天课程:Section1 ->表空间的操作和管理.服务配置 > 五:<OC…