《Inatica学习笔记整理.doc》由会员分享,可在线阅读,更多相关《Inatica学习笔记整理.doc(11页珍藏版)》请在金锄头文库上搜索。
1、Informatica学习整理1.Informatica产品介绍: PowerCenter:Informatica PowerCenter是世界级的企业数据集成平台,它在ETL领域中无论是执行能力还是战略远见方面都是佼佼者,是Informatica的核心产品 。2.ETL环节中最重要的: 大家可能大部分会认为转换才是最重要的环节,但事实上是加载环节。 按重要程度递减排序,分别是load(装载)、clean(清洗)、transfer(转换)、extract(抽取)3.具有2个server: Informatica Repository Server:资料库server,管理ETL过程产生的元数据
2、,用来管理对资料库中元数据的请求和操作; Informatica server:实际的ETL引擎;4.具有5个client: PowerCenter Designer:设计开发环境,定义源及目标数据结构;设计转换规则,生成ETL映射 Workflow Manager:合理地实现复杂的ETL工作流,基于时间、事件的作业调度 Workflow Monitor:监控Workflow和Session运行情况,生成日志和报告 Repository Manager:资料库管理,包括安全性管理等,元数据维护和安全操作,如:元数据查找,用户、组、权限管理等。 Repository Server Adminis
3、trator Console:对知识库的操作,如:知识库的创建、备份、恢复等。5.基本的ETL任务设计和部署的大致步骤: 使用Designer客户端,获取源数据表的元数据。 使用Designer客户端,获取目标数据表的元数据。 使用Designer客户端,设计一个Mapping,其中就是源-目标的ETL规则。 使用Workflow Manager客户端,针对上面实现的Mapping,实例化为一个Session,为其指定实际的数据源、目标连接,以及其他属性。 使用Workflow Manager客户端,创建一个Workflow,其中包含上述的Session以及其他的Task,在Workflow中
4、可实现复杂的流程控制。 运行上述Workflow,使用Workflow Monitor客户端,监测最终的任务运行结果。6.一个简单的Mapping设计过程(8.1.1版本):第一步:进入Repository Manager,在你的库下建立一个文件夹,用来储存自己的Mapping,如图1.1: 图1.1第二步:假如你所建的文件夹名称为org_wellzaj,然后打开Powercenter Designer,你就会看到你所建的文件夹org_wellzaj,右击OPEN此文件夹,会发现有很多的子目录,点击Sources子目录,从数据库中导入表结构,如图1.2: 图1.2第三步:导入目标表结构,导入过
5、程和导入源表结构一样,假如源表为DEPTINFO,目标表为USERANDDEPT,现在可以设计自己的mapping了,将目标表和源表组件拖到设计台中,在工具栏中选择一个你想要处理的控件,假如为Filter也拖放到mapping设计台中,通过名称和位置进行连接关联,效果如图1.3: 图1.3第四步:打开workflow manager,创建自己的Session,如图1.4: 图1.4第五步:create一个workflows,会产生一个绿色的Start(这个是自动产生的),再将做好的Session拖放到workflow的设计台中,将start和session关联(Link)如图1.5: 图1.5
6、第六步:保存你的workflow,右击运行此workflow(kk_org),如图1.6: 图1.7第七步:此时会进入workflow montitor,可以查看workflow、session的log,如图1.8:说明:数据库的安装配置,服务端的安装配置在此没有说明,请查阅相关资料Informatica学习笔记二1. Expression transformation:类似与过滤控件,可以起到过滤的作用,当选择为O或者V时,才可以对Expression进行编辑,如图2.1: 图2.12. Filter transformation:过滤控件,对相应字段写出自己的过滤条件,如图2.2: 图2.
7、23. Aggregator transformation:基于多行记录的汇总计算,如:取平均值和总和,如图2.3: 图2.34. Lookup transformation:从数据库表中,按条件查找相关的值专送给其它的对象,如图2.4: 图2.4Lookup另外一种用法,在平台中单独出来,在Expression控件中进行调用,如图2.5: 图2.5LKPTRANS控件被单独的独立出来,但在Expression中调用它,也起到了查找的作用;5. Sequence Generator transformation:当你目标表中莫个字段是递增形式时,就可以使用此组件,如图2.6: 图2.6使用此组件可以将DEPTID,不断的递增;6. Joiner transformation:关联组件,比如内连接,左联接等,如图2.7: 图2.77. Union transformation:合并组件,将具有相同字段个数和类型的字段行,进行合并成一个整表,如图2.8:Group01和Group02是在Groups中设定的,顶上面的三行是用来输出的;