欢迎来到天天文库
浏览记录
ID:36200161
大小:2.66 MB
页数:28页
时间:2019-05-07
《datastage基础培训教程》由会员上传分享,免费在线阅读,更多相关内容在教育资源-天天文库。
1、DataStage基础培训Jerry2006.03议程HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control2演示:HelloWorldExtractTransformLoan3HelloWorldDataStageComponentsDefineParameters&TablesHashFile、Transformer、
2、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control议程4DataStageArchitectureTarget(DatabaseorFile)ODBC/NativeDataStageConnectAPIDataStageServer(WinNT,Win2000orUNIX)ODBC/NativeDataSources(DatabaseorFile)DataStageConnectAPIDataStageConnectAPIDataStageConnectAP
3、IDataflowDataflow5DataStageComponentsManagerDesignerDirectorMetadatacollectionandmanagementDesignprocessflowRunjobs,checklogsandsetschedulesDataStageAdministratorCreate,Editprojects6HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirec
4、tor&MonitorAdministrator&ManagerRoutine&Control议程7全局变量与Job变量全局变量--生命周期:整个Project--在Administrator中定义Job变量--生命周期:一个Job--在Designer、Manager中定义8演示:定义一个Job变量在Designer中定义参数9Metadatadefinition元数据管理的重要组成部分在Manger或Design中定义演示:--importfromaflatfilein.txtformat--importfromanDBMSt
5、able10演示TableDefinition在Manage中定义Table11HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control议程12演示:生成事实表明细表事实表关联聚合13HashFile用途:--左连接时用作副表--多次被访问的数据集--存储其他临时数据关键点:--必须指定key--output的positio
6、n必须与input一致14Transformer用途:--提供丰富的运算符和函数--数据清洗、转换--关联多个数据源关键点:--副表的key必须被主表的某个字段关联--尽量避免两个Transformer直接相连15Aggregator用途:--Sum,Max,Min,Average等聚合函数--一般用于生成事实表16HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transformer、AggregatorDirector&MonitorAdministrato
7、r&ManagerRoutine&Control议程17DebugandTuningViewStatusandLogs-status,log,detail等多种视图-配合Monitor来查错、调优18JobStatusNotCompiledCompiledResetRunningFinishedFinished(withwarning)Abort19ScheduleJobAddtoSchedule20HelloWorldDataStageComponentsDefineParameter&TableHashFile、Transf
8、ormer、AggregatorDirector&MonitorAdministrator&ManagerRoutine&Control议程21AdministratorAddanewprojectModifyprojectproperties-字
此文档下载收益归作者所有