欢迎来到天天文库
浏览记录
ID:62014908
大小:2.91 MB
页数:27页
时间:2021-04-12
《数据集成-kettle-基础.ppt》由会员上传分享,免费在线阅读,更多相关内容在教育资源-天天文库。
1、数据集成-软件基础数据集成软件基础1.软件运行2.转换模型1软件运行-配置安装JRE7.0以上配置JAVA_HOME1软件运行-主界面1软件运行-菜单1软件运行-转换界面数据实时捕获1软件的运行-转换界面数据实时捕获数据集成软件基础1.软件的启动与界面2.转换模型2转换模型-步骤与连接转换(Transformation)是由多个步骤(step)组成的网络,转换本质上是数据流。转换的两个相关的主要组成部分是步骤(step)和节点连接(hops)。转换文件的扩展名是.ktr。2转换模型-步骤与连接转换步骤3
2、转换模型-步骤与连接步骤(Steps)是转换的建筑模块,比如一个文本文件输入或者一个表输出就是一个步骤。每个步骤用于完成某种特定的功能,通过配置一系列的步骤就可以完成你所需要完成的任务。3转换模型-步骤的类型数据输入Input数据输出Output数据转换Transfer流程控制Flow查询Lookup脚本Scripting连接Join统计Statistics3转换模型-连接节点连接(Hops)是数据的通道,用于连接两个步骤,使得元数据从一个步骤传递到另一个步骤。节点连接决定了贯穿在步骤之间的数据流,步骤
3、之间的顺序不是转换执行的顺序。当执行一个转换时,每个步骤都以自己的线程启动,并不断的接受和推送数据。案例2转换模型总体为关系型模型,均会分解成行和列进行处理3转换模型-1)流程设置3转换模型-2)元数据设置表输入节点读取数据2、元数据设置3转换模型-2)元数据设置Src数据连接3转换模型-2)元数据设置计算节点增加字段3转换模型-2)元数据设置插入/更新节点写数据3转换模型-2)元数据设置Src数据连接执行转换执行转换启动界面转换执行结果转换执行结果每个步骤都是一个单独的线程以线程运行RowsetRow
4、set以同步队列为通信每次以行为单位进行处理3转换模型-线程模型和通信模型右键单击步骤,可以查看该步骤的输入和输出字段3转换模型-步骤的输入输出字段3转换模型-步骤的输入输出字段输入字段输出字段
此文档下载收益归作者所有