欢迎来到天天文库
浏览记录
ID:33361528
大小:2.12 MB
页数:65页
时间:2019-02-25
《宝钢精准选样模型原型数据筛选软件的设计与开发》由会员上传分享,免费在线阅读,更多相关内容在学术论文-天天文库。
1、东北大学硕士学位论丈摘要宝钢精准选样模型原型数据筛选软件的设计与开发摘要宝钢2050和1580两条热轧生产线的采样流程是监控热轧产品质量的有力保证。针对现有采样流程的采样随机、采样量过大的缺点,精准选样模型对现有采样模型进行了优化,它通过产品质量预测柬指导钢卷采样,从而达至0质量监控和减少采样量的目的。精准选样模型是一个涉及到工艺技术和生产管理的复杂系统,在模型投入现场使用前,需要通过仿真的手段对模型的可行性进行验证,精准选样模型原型即是对精准选样模型的仿真。由于模型具有数据量大、涉及面广等特点,且这些数据分布在多个异构数据存储系统中,为了给模型提供精
2、准完备的数据信息,有必要对原始数据进行筛选。这个筛选过程是通过一个特殊的数据筛选(ETL:数据抽取、转换和装载)软件来实现的。论文分析了数据仓库和ETL原理,结合宝钢精准选样模型原型的仿真环境,明确了具体数据筛选需求,提炼了软件的功能和性能需求。论文在ETL原理的基础.卜,分析了软件的数据流程,设计了数据筛选软件结构。数据筛选软件的主要功能是从异构数据源中抽取数据,按照模型需求进行数据模式转换,并将转换后的数据装载到目的数据库中。在软件开发中,结合精准选样模型原型数据筛选需求,采用元数据方法,提出了以工作流的方式来完成数据筛选任务;基于OLEDB的数据
3、集成技术,支持对异构数据源的访问;动态链接库技术节省了软件开发时间,提高了软件的复用率;应用多表对应关系可视编辑的思想,简化了数据筛选规则的编辑过程;菜单(包括快捷菜单)、脚本支持等技术提供了友好的人机交互界面。在宝钢项目中,软件能够灵活的对数据筛选方式和过程迸行控制,通过数据筛选规则的执行自动完成数据从源到目的数据库的转换,整个过程可视、操作简单。经实际运用表明,数据筛选软件筛选的数据在格式转换率上达到98%,满足了精准选样模型原型的需求,为整个项目的顺利完成提供了保证。关键词:元数据,ETL,通用数据访问技术,数据仓库Ij东北大学硕士学位论文ABS
4、TRACTDesignandImplementationoftheETLSoftwareforBaosteelPrecisionSamplingModelAbstractThepresentsamplingflowof2050and1580inBaosteelensurethequalityofthehotrollproducts,buttherealsoexistsomedefectswhenthespeedofproductionquicken,forexample,thehighfrequencyofsampling.Baosteelprecis
5、ionsamplingmodeloptimizethepresentsamplingflow.Throughtheforecasttechniqueforhotrollproducts,thenewmodelCaneffectivelyreducethesamplingnumber.PrecisionsamplingmodelisSOcomplexthatthedatainformationwantedisbigandcomprehensive,andbecauseallthedatadistributedifferentDatabasesystems
6、,dataETL(extract,transformandload)isnecessary.TheconceptionsofETL、DatawarehouseandtheapplicationofETLareintroducedinthisthesis.BasedontheprincipleofETLandtherequirementsofprecisesamplingmodel,aspecialdatafiltratesoftwarehasbeenexploited.ThemostlyfunctionofthesoftwareisdataETLand
7、thisfunctionisfulfilledbyeditingandrunningthedatafiltraterule.Inaddition,thissoftwarealsohavesomeassistantfunctions,suchasdataquery、tablemodelcopy、scriptlanguagesupportandSOon.ThedataETLindifferentdatabasescanbewellimplementduototheuseofUDAtechniquebasedonOLEDBandtheallprocesses
8、ofETLinsoftwarebecomesimplerbecauseofMeta-Datab
此文档下载收益归作者所有