Oracle Data Integrator 使用手册使用手册 Author Author : : 王洋王洋 (Ocean)(Ocean) Email Email ： ocean.wang ocean.wang Creation Time Creation Time : : 20112011- -1010- -2 24 4 1 .Oracle Data Integrator 组件说明 4 1.1 Oracle Data Integrator . 4 1.2 Oracle Data Profiling . 4 1.3 Oracle Data Quality for Data Integrator . 4 1.4 Oracle Data Quality Products . 5 2 .Oracle Data Integrator 一系列术语名词 . 6 2.1 Project: . 6 2.2 Folder： . 6 2.3 Packages： . 6 2.4 Interface . 6 2.5 Procedure . 6 2.6 Variable . 6 2.7 Sequence . 6 2.8 User Functions . 6 2.9 Scenario . 6 3 .预安装前提条件 8 3.1 Configuration for Oracle Data Integrator: . 8 3.2 Configuration for Oracle Data Quality Products. . 8 3.2.1 Oracle Data Quality Client . 8 3.2.2 Oracle Data Profiling and Data Quality Server . 8 3.3 可用端口 . 9 3.4 其他 . 9 4 .ODI 的安装 . 10 4.1 10.1.3.4.0 之前版本的安装 10 4.2 10.1.3.4.0 以上版本的安装 15 4.3 11g 版本的安装 19 5 .ODI 的卸载 25 6 .JDBC/JMS 驱动安装 27 7 .ODI 基本配置步骤 28 7.1 资料库存储空间 . 28 7.2 创建资料库用户 . 28 7.3 创建主资料库 . 28 7.4 连接主资料库 . 32 7.5 创建工作资料库 . 34 7.6 连接工作资料库 . 39 8 .Agent 的配置 42 8.1 Listener agent . 42 8.2 Scheduler agent . 42 8.3 Web agent . 43 8.4 Stop agent . 44 9 .Lightweight Designer 安装步骤 45 9.1 先安装 Web Server 45 9.2 安装 Lightweight Designer 45 9.3 Lightweight Designer 配置连接 45 9.4 配置数据源 . 45 9.5 配置 Repository 连接 47 10 .ODI Metadata Navigator 安装步骤 49 10.1 先安装 Web Server 49 10.2 安装 Metadata Navigator 49 10.3 ODI Metadata Navigator 配置连接 49 10.4 配置”connection to the work repository” . 49 10.5 数据库的 JAR 文件拷贝 . 50 10.6 资料库连接 . 50 10.7 登陆 ODI Metadata Navigator 50 11 配置和启动 CDC 51 11.1 针对数据源模型配置日记记录（选择合适的 JKM） 51 11.2 将需要进行 CDC 的数据存储添加到 CDC . 52 11.3 添加订阅 . 53 11.4 启动日记 . 54 11.5 接口设置 . 55 12 .ODI 的安全控制 56 13 .典型 ELT 配置步骤 . 57 13.1 Insert a Data Server . 57 13.2 Create an Oracle Physical Schema . 60 13.3 Create an Oracle Model . 63 13.4 Reverse-Engineer an Oracle Model . 64 13.5 Create a Datastore . 65 13.6 Create a Project . 67 13.7 Create a Interface . 68 13.8 Create a Package . 68 13.9 Generating a Scenario . 69 13.10 Create a scheduler . 69 14 .问题总结 . 69 14.1 如图，创建 DataServer 时 test10g 必须填写 . 69 14.2 目标端到远端需要创建 dblink 69 14.3 目标端是 11g，连接远端是 10g 版本 70 14.4 用户权限 . 70 14.5 ODI-1405 没有在拓扑中为主资料档案库定义代理 70 14.6 ODI-15020 没有 JKM 可用 70 1 1 . .Oracle Data IntegratorOracle Data Integrator 组件说明组件说明 在新的 10.1.3.4 版本的 ODI 中，新增了 1.2 和 1.3 两个功能，所以就有几种不同的安装 方法 1.11.1 Oracle Data IntegratorOracle Data Integrator 包含如下组件： modular Repositorymodular Repository 有两种 Repository，一种叫 Master Repository 一种叫 Work Repositories. 图形化的接口工具图形化的接口工具 有几种 Topology Manager 、Designer、Security Manager、 Operator 还有 execution agents (Agent)， 这些工具都是以 client/server 模式访问控置 Repository 的 Metadata NavigatorMetadata Navigator 一个 Servlet/JSP 的应用，提供通过 web 界面来接入访问 repository 的功能。需要 web server 的支持. Lightweight DesignerLightweight Designer 一个 web 应用，提供通过 web 界面来接入访问 repository 并可以 浏览和编辑 repository 中的对象的功能。需要 web server 的支持 Oracle Data InteOracle Data Integrator Studiogrator Studio 上述几个管理工具，11g 以后统一打包叫做 Oracle Data Integrator StudioOracle Data Integrator Studio Oracle Data Integrator Public Web ServicesOracle Data Integrator Public Web Services ，为 SOA 提供的，web services that enable users to leverage Oracle Data Integrator features in a service-oriented architecture (SOA). 1.21.2 Oracle Data ProfilingOracle Data Profiling 包含如下组件： Metabase Server Metabase Server 包含 profiling data 和 metadata. Scheduler ServerScheduler Server 处理 profiling jobs. The Oracle Data Quality User InterfaceThe Oracle Data Quality User Interface 一个对 Oracle Data Profiling and Oracle Data Quality 的客户端的通用接口 The Oracle Data Quality ODBC AdapterThe Oracle Data Quality ODBC Adapter 用来连接 ODBC 数据源 ，这个选项只在 windows 系统上可以安装 1.31.3 Oracle Data Quality for Data IntegratorOracle Data Quality for Data Integrator 除了包含 Oracle Data Profiling 中包含的组件外，还包含一个 Data Quality ServerData Quality Server is the run-time server running data quality projects. 1.41.4 Oracle Data Quality ProductsOracle Data Quality Products Data Profiling 和 Oracle Data Quality for Data Integrator，也一起称为 OraclOracle Data e Data Quality Products. Quality Products. ODI 10.1.3.4 版本里的新特性 Data Profiling 是一个数据研究和质量监督工具，允许业务用户去评定数据质量，去发掘、 监控数据质量的演化。 comprehensive award-winning data quality platform that covers even the most complex data quality needs 2 .Oracle Data Integrator 一系列术语名词一系列术语名词 2.12.1 Project: Project: 由 ODI 生成的许多对象的一个集合，一个组 2.22.2 FolderFolder： project 中的对象可以分组，放到不同的文件夹中 2.32.3 PackagesPackages： ODI 中的可执行单元， 可以包含很多 steps， 比如 Interface， Procedure， Variable 2.42.4 InterfaceInterface 从多个数据源加载数据的一系列 rules 的集合 2.52.5 ProcedureProcedure 可以被代理执行的一系列命令的集合，比如接受邮件，压缩一个文件，或 者等待一个 ftp 操作 2.62.6 VariableVariable 就是一个变量的意思 2.72.7 SequenceSequence 就是 oracle 数据库里的序列的意思 2.82.8 User FUser Functionsunctions 用户定义的函数 2.92.9 ScenarioScenario Package， interface等等设计好了之后生成Scenario之后就可以执行了， 以下几种方法执行 scenario： 1、在 ODI 项目中创建 Senario XXX VERSION 002, ODI 目录的 bin 目录下 执行 startscen XXX 002 GLOBAL “-v=2“ - Scenario name - Scenario version - Scenario context - Logging level 2、在 scenario 下创建 schedule(调度),设置好执行