…

以下为一个完整的informatica读取ftp文件,并导入到系统中. 第一步: 通过shell脚本下载压缩包文件 /server/infa_shared/crm_prod/shell/ftpFromLive.sh $$ZIP_FILE_NAME shell脚本内容如下: #!/bin/bash filename=$ ftp -niv xxx.xxx.xxx.xxx <<-EOF user username password binary #服务器增加防火墙后,ftp请求已经修改为主动模式 p…

GitHub新手快速入门日常操作流程 1. 注册帐号 打开https://github.com/,填写注册信息并提交. 2. 登录帐号 打开https://github.com/login,输入注册的用户名.密码并提交. 3. 访问项目主页 进入具体项目的主页,如:https://github.com/five3/testdoc 4. fork项目 点击页面右上角处的fork按钮,这样github就会在你的帐户下fork一个同样的备份. 5. 查看自己名下的fork项目 进入自己的主页 点击‘r…

angular的模块之间,以及controller.directive等组件之间,是相对独立的,用以实现解耦合. 为实现相互之间传递信息及操作流程,有以下一些机制: 1.事件机制: $scope.$broadcast:向下广播事件,下方所有的scope都会接收到这个事件,事件不能中途终止. $scope.$emit:向上冒泡事件,可带参数,一直冒泡到$rootScope,中途可以用stopPropagation()方法终止冒泡. 2.scope的继承机制: 子scope的__proto__对象就…

Informatica相同环境与不同环境的导入导出( Repository Name,Integration Service Name,Folder Name是否相同): 1.repository Name: Repo_A_Uat: <REPOSITORY NAME="Repo_A_Uat" : 当导入导出的Repository不相同名字时,要在导出的XML file中批量替换. 2.Integration Service Name: SERVERNAME ="Int_…

Informatica Lookup Transformation组件的Connect 与Unconnected类型用法及区别:下面是通一个Lookup在不同Mapping中的使用: 1. Connect lookup: 可以返回多个输出port的字段值,需要用连接线将输入.输出port连接到其他组件. 2. Unconnected lookup 只能返回一个port的字段值,无需连接线连接到其他组件,只需直接在Expression表达式中像调用函数函数那样调用它即可获得返回值. Connect…

Informatica - Powercenter 英文版资料 http://gerardnico.com/wiki/powercenter/powercenter…

1. INFORMATICA CLIENT的使用 1.1 Repository Manager 的使用 1.1.1 创建Repository. 前提: a.在ODBC数据源管理器中新建一个数据源连接至你要创建Repository的数据库(例:jzjxdev) b. 要在你要连接的数据库中新建一个用户(例:name: ETL password: ETL) 现在你可以创建一个Repository了.选择Repository – Create Repository,输入RepositoryName(例…

Git是一个分布式的版本控制系统,最初由Linus Torvalds编写,用作Linux内核代码的管理.作为一个程序员,我们需要掌握其用法. 作为开源代码库以及版本控制系统,Github目前拥有140多万开发者用户.随着越来越多的应用程序转移到了云上,Github已经成为了管理软件开发以及发现已有代码的首选方法.其联合创始人Chris Wanstrath曾经形象地称其为“程序员的维基百科全书”. GitHub 使用 git 分布式版本控制系统,而 git 最初是 Linus Torvalds 为…

转自 http://blog.csdn.net/thy822/article/details/8489779 这篇文章, 我不能同意更多, 所以转在这里. Here is my thinking after looking at both products... First of all let me tell you what I like about informatica.... - Inbuilt tool to export mappings to Excel and Visio...…

摘自: http://blog.itpub.net/28690368/viewspace-766528/ informaica是一个很强大的ETL工具,WORKFLOW MANAGER负责对ETL调度流程进行设计与管理和执行,informatica在资料库中提供以下表来存储调动流程的相关信息,以便WORKFLOW MANAGER对用户所设计的调动流程进行管理和执行. opb_wflow_dep:     描述workflow执行步骤相关信息和每个步骤执行的条件信息opb_wflow_dep_ru…

#传mapping参数时#调用执行workflow,-sv informatica服务,-d 域 -u 用户,-p 密码 -folder知识库下的workflow所在文件夹,-wait wf_test (workflow名) cd /server/bin ./server/infa_shared/crm_prod/prod_para.txt -wait wf_test…

INFORMATICA SERVER的调优我认为主要从两个级别来做,一个是MAPPING级别,一个是SESSION级别. 对于MAPPING级别的调优: 一  对MAPPING数据流向的优化: 1 控制源头过来的数据内容,根据设计需求,不需要过来的数据尽量不加载.当然这个主要在SOURCE QUALIFIER 里用SQL过滤好些. 2 TRANSFERMATION组件的顺序也是很有讲究的,如果是EDW中需要STAG表的话,从源过来的第一层一般就直接加载.在第二层一般是计算聚合过程,这个过程的MA…

当一套BI 解决方案成熟运行后,公司会快速扩大客户群,这时快速的将开发出来的SOLUTION 应用到全新的生产环境中就很重要了,下面谈谈我做这样项目(INFORMATICA BACKUP&RESTORE)的一点经历. 大概步骤如下: 1连接到需要实施的生产环境INFA SERVER上,检查对应环境信息:需要实施的生产环境源的数据连接信息列表,目标DW的连接信息.如果是WINDOWS平台,配置对应的ODBC,TNS信息.如果是UNIX平台,配置对应的.PROFILE,ODBC.INN,TNSNAM…

软件开发的一般都有三个环境,开发环境,用户接受度测试环境,生产环境.我最近实施了从开发环境到生产环境的部署工作,在此跟大家分享一下. 大概步骤如下: 1 备份生产环境INFORMATICA 知识库  登录CONSOLE备份当前的知识库. 2 在开发环境的INFORMATICA REPOSITORY MANAGER 上导出最新开发的文件夹,导出格式为XML文件. 3 在生产环境的INFORMATICA REPOSITORY MANAGER上导入对应的XML文件,导入过程中需要设置规则来处理对应重名…

1.informatica中domain与node的理解: domain 类似于局域网,node就是局域网中的节点或者计算机. node应与repository在数据库中存储在不同的scheme中,此处node指informatica操作的内容. 2.informatica中Repository Service 与 Intergration Service IS:工作引擎:RS:管理引擎,管理repository: IS与RS工作流程为:客户端发请求到IS,IS调用RS完成各种ETL操作,其中,…

本文对于informatica使用过程中产生的问题及解决方案做总结,持续更新中... 1.partitioning option license required to run sessions with user_defined partition points 原因:union 组件要求使用分区,但是license 却没有该权限. 解决方案:1.union中 is partitinable 设置为no,require single thread per partition 取消check:…

经验和积累蛮重要!向大神学习! ---------------------------------------------------------------------- Mapping: 在source --> source qualifier 之后,我去掉了一列 Event_number,然后导入target表中. 然后,在workflow中 source里面的SQL query 填了一个筛选条件: 选出Airs_On='CBS' 的所有行(列起初和source保持一致). 最后跑这个wo…

Informatica所有的元数据信息均以数据库表的方式存到了元数据库中.当然Infa本身工具提供了很多的人性化的功能,使我们在开发时可以很方便的进行操作,但人们的需求总是万变的,需要方便的取到自己需要的信息,那就需要我们对他的元数据库有很深的了解. Informatica所有的元数据信息均以数据库表的方式存到了元数据库中.当然Infa本身工具提供了很多的人性化的功能,使我们在开发时可以很方便的进行操作,但人们的需求总是万变的,需要方便的取到自己需要的信息,那就需要我们对他的元数据库有很深的了解…

原因分析解决及如何避免(PowerCenter 8.6.1) 前几天同事安装了个PowerCenter8.6.1做测试,出去了几天回来后Administration Console无法登入了.同事用的是自己的本子,公司IP是自动获取的.由于自动获得的IP与以前的IP不同,因为造成了无法连接domain的元数据库(数据库与Informatica服务在同一台机器上),进而Administration console无法登陆. 概述: 简略总结了一下,无法登入Administration consol…

GitHub是最先进的分布式版本控制工具,下面是我学习中总结的操作流程,仅供参考 ------------------------------------------------------------------------------------------------------------------------------------------------------------------------------ Git安装 下载git的windows版本并安装,不予详述(直接打开…

以下主要讲解了Hadoop的文件读写操作流程: 读文件 读文件时内部工作机制参看下图: 客户端通过调用FileSystem对象(对应于HDFS文件系统,调用DistributedFileSystem对象)的open()方法来打开文件(也即图中的第一步),DistributedFileSystem通过RPC(Remote Procedure Call)调用询问NameNode来得到此文件最开始几个block的文件位置(第二步).对每一个block来说,namenode返回拥有此block备份的所有…

转载网址:http://www.bitscn.com/pdb/mysql/201005/186551.html       以下的文章主要介绍的是Java连接MySQL 数据库(以MySQL数据库为例),我们主要是以MySQL数据库为例讲下Java正确连接MySQL数据库的实际操作流程,以下就是对其详细内容的描述. 当然,首先要安装有JDK(一般是JDK1.5.X).然后安装MySQL,这些都比较简单,具体过程就不说了.配置好这两个环境后,下载JDBC驱动MySQL-connector-java…

学习ADO,免不了要跟数据库打交道,对于初学者来说,如果不整理一下整个流程,那么可能会出现很多的问题,下面简单的介绍数据库的操作流程. 1.     我们最终操作的对像是数据表,在操作数据表之前我们先要明确我们要操作的数据库,因为只有先连接了数据库才能进入数据库操作里面存储的表. 所以才有以下连接数据库的代码:      string connString = "Data Source=.;Initial Catalog=MySchool;Integrated Security=True&quo…

Android中数据库的操作方法: 1.Android平台提供了一个数据库辅助类来创建或打开数据库. 这个辅助类继承自SQLiteOpenHelper类.继承和扩展SQLiteOpenHelper类主要做的工作就是重写下面两个方法. (1).onCreate(SQLiteDatabase db) : A.当数据库被首次创建时(用户初次使用软件时)运行该方法.一旦数据库存在就不会调用该方法了. B.只生成辅助类(继承SQLiteOpenHelper类)对象的时候是不会调用该函数的,唯独当调用辅助类…

Informatica  结构 1个或多个资源库(Respository) PowerCenter数据整合引擎是基于元数据驱动的,提供了基于数据驱动的元数据知识库(Repository),该元数据知识库可以在主流的关系型数据库中部署.该院数据库中存储所有的ETL元数据,包括:源.目标表的物理和逻辑元数据,ETL转换规则,知识库用户权限,ETL任务运行历史信息等元数据. 2个Server Informatica Repository Server: 资料库的Server,管理ETL过程中产生的元数…

本文目标: 为方便学习Informatica工具,在个人电脑上部署Informatica Powercenter. 所用系统:win7 64位. Informatica安装包括服务器端.客户端安装两个部分,因为服务器端安装.使用过程中需要数据库保存信息,因此,本文中所用系统已经提前安装了Oracle11g数据库,同时,为学习Informatica的一些新特性,本文中选择info 9.6版本. 一.准备 1.安装介质的获取 官网下载地址:https://edelivery.oracle.com/o…

之前已经完成了登录.新增和修改的操作流程,这一节主要说明删除操作流程以及自动化的过程中出现的问题,算是对这个项目自动化的一个总结. 删除操作流程 对于系统账号管理中删除功能,删除的测试点主要如图所示 而账号管理的页面显示如图 在管理页面中可以看出,删除操作物理删除且没有批量操作功能.但是这里有一点需要主要,每个新注册的账号会默认监管所属机构下所有的用户,所以这里为了用例的健壮性,我们删除正常的用例的具体操作步骤如下 新增一个账号信息 取消新增账号的监管用户 定位到该新增账号页面中的删除按钮,点击…

最近在做关于摄像头测试程序相关的一些开发,主要是想要实现在摄像头采集视频的过程中,通过按键来实现拍照,然后将拍照得到的数据保存到一个文件中,通过了解V4L2的一些相关操作,原来,拍照后的数据是保存在一个buf里,而这股数据流便是熟悉的YUYV,要看到相应的图片,还需要特定的转换才能将YUYV的数据转换成bmp图片. 那么,在摄像头中,是怎么获取到图片的呢? 通过V4L2的官方手册,我们得知是该控制命令VIDIOC_DQBUF 那么这个命令的作用是什么呢? 功能: 从视频缓冲区的输出队列中取得一个…

环境: 操作系统:Windows7(64位): 数据库:Oracle 11g R2: 数据库字符集:UTF-8 一.下载: (参考链接:https://blog.csdn.net/u011031430/article/details/76167934) 1.打开 https://edelivery.oracle.com/osdc/faces/Home.jspx  ,注册一个账号(已有的跳过),登录进去后,在以下界面,输入informatica进行查找 2.然后选择 Oracle Business…