1、Informatica 学习整理1.Informatica 产品介绍: PowerCenter：Informatica PowerCenter 是世界级的企业数据集成平台，它在ETL 领域中无论是执行能力还是战略远见方面都是佼佼者，是 Informatica 的核心产品 。2.ETL 环节中最重要的 : 大家可能大部分会认为转换才是最重要的环节，但事实上是加载环节。 按重要程度递减排序，分别是 load（装载）、clean（清洗）、transfer（转换）、extract（抽取）3.具有 2 个 server: Informatica Repository Server:资料库 server,
2、管理 ETL 过程产生的元数据, 用来管理对资料库中元数据的请求和操作; Informatica server:实际的 ETL 引擎;4.具有 5 个 client: PowerCenter Designer：设计开发环境，定义源及目标数据结构；设计转换规则，生成 ETL 映射 Workflow Manager：合理地实现复杂的 ETL 工作流，基于时间、事件的作业调度 Workflow Monitor：监控 Workflow 和 Session 运行情况，生成日志和报告 Repository Manager：资料库管理，包括安全性管理等，元数据维护和安全操作，如：元数据查找，用户、组、权限管
3、理等。 Repository Server Administrator Console：对知识库的操作，如：知识库的创建、备份、恢复等。5.基本的 ETL 任务设计和部署的大致步骤: 使用 Designer 客户端，获取源数据表的元数据。 使用 Designer 客户端，获取目标数据表的元数据。 使用 Designer 客户端，设计一个 Mapping，其中就是源- 目标的 ETL 规则。 使用 Workflow Manager 客户端，针对上面实现的 Mapping，实例化为一个Session，为其指定实际的数据源、目标连接，以及其他属性。 使用 Workflow Manager 客户端，创
4、建一个 Workflow，其中包含上述的 Session以及其他的 Task，在 Workflow 中可实现复杂的流程控制。 运行上述 Workflow，使用 Workflow Monitor 客户端，监测最终的任务运行结果。6.一个简单的 Mapping 设计过程(8.1.1 版本):第一步:进入 Repository Manager,在你的库下建立一个文件夹 ,用来储存自己的 Mapping,如图 1.1: 图 1.1第二步:假如你所建的文件夹名称为 org_wellzaj,然后打开 Powercenter Designer,你就会看到你所建的文件夹 org_wellzaj,右击 OPEN
5、 此文件夹,会发现有很多的子目录,点击Sources 子目录,从数据库中导入表结构,如图 1.2:图 1.2第三步:导入目标表结构,导入过程和导入源表结构一样,假如源表为 DEPTINFO,目标表为USERANDDEPT,现在可以设计自己的 mapping 了,将目标表和源表组件拖到设计台中 ,在工具栏中选择一个你想要处理的控件,假如为 Filter 也拖放到 mapping 设计台中,通过名称和位置进行连接关联,效果如图 1.3:图 1.3第四步:打开 workflow manager,创建自己的 Session,如图 1.4:图 1.4第五步:create 一个 workflows,会产生
6、一个绿色的 Start(这个是自动产生的), 再将做好的 Session 拖放到 workflow 的设计台中,将 start 和 session 关联(Link) 如图 1.5:图 1.5第六步:保存你的 workflow,右击运行此 workflow(kk_org),如图 1.6:图 1.7第七步:此时会进入 workflow montitor,可以查看 workflow、session 的 log,如图1.8:说明:数据库的安装配置,服务端的安装配置在此没有说明,请查阅相关资料Informatica 学习笔记二1. Expression transformation:类似与过滤控件,可以
7、起到过滤的作用,当选择为 O 或者 V 时,才可以对 Expression 进行编辑,如图 2.1:图 2.12. Filter transformation:过滤控件, 对相应字段写出自己的过滤条件, 如图 2.2:图 2.23. Aggregator transformation:基于多行记录的汇总计算,如:取平均值和总和, 如图2.3:图 2.34. Lookup transformation:从数据库表中, 按条件查找相关的值专送给其它的对象, 如图2.4:图 2.4Lookup 另外一种用法, 在平台中单独出来, 在 Expression 控件中进行调用,如图 2.5: 图 2.5LKPTRANS 控件被单独的独立出来,但在 Expression 中调用它 ,也起到了查找的作用;5. Sequence Generator transformation:当你目标表中莫个字段是递增形式时,就可以使用此组件,如图 2.6:图 2.6使用此组件可以将 DEPTID,不断的递增;6. Joiner transformation:关联组件, 比如内连接,左联接等,如图 2.7:
