基于web services和quartz的数据整合系统的设计与实现

《基于web services和quartz的数据整合系统的设计与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、学校代码：１０００４密级：公开交道乂攀ＢＥＩＪＩＮＧＪＩＡＯＴＯＮＧＵＮＩＶＥＲＳＩＴＹ硕ｉ专业学位论文基于ＷｅｂＳｅｒｖｉｃｅｓ和Ｑｕａｒｔｚ的数据整合系统的设计与实现作者姓名焦继笑工程领域软件工程指导教师孔令波讲师＇培养院系软件学院．；於马＇＇＾＾．；巧ｊ麵巧．，．ｉｉ遍＾於沒４乂攀硕±专业学位论文基于ＷｅｂＳｅｒｖｉｃｅｓ和Ｑｕａｒｔｚ的数据整合系统的设计与实现ＤｅｓｉｎａｎｄＩｍｌｅｍｅｎｔａｔｉｏｎｏｆＤａｔａＩｎｔｅｒａｔｉｏｎＳｓ化ｍｂａｓｅｄ

2、ｏｎＷｅｂｇｐｇｙＳｅｒｖｉｃｅｓａｎｄｕａｒｔｚＱ作者；焦继笑导师：孔令波北京交通大学２０１６年６月学位论文版权使用授权书本学位论文作者完全了解北京交通大学有关保留、使用学位论文的规定。特授权北京交通大学可Ｗ将学位论文的全部或部分内容编入有关数据库进行检索，提供阅览服务。，并采用影印、缩印或扫描等复制手段保存、汇编Ｗ供查阅和借阅同意学校向国家有关部口或机构送交论文的复印件和磁盘。（保密的学位论文在解密后适用本授权说明）学位论文作者签备导师签《：签字曰期；＞〇／年／月＾签字曰期：月知／Ｉ学校代

3、码：１０００４密级：公开北京交通大学硕±专业学位论文基于ＷｅｂＳｅｒｖｉｃｅｓ和Ｑｕａｒｔｚ的数据整合系统的设计与实现ＤｅｓｉｇｎａｎｄｉｍｐｌｅｍｅｎｔａｔｉｏｎｏｆｄａｔａｉｎｔｅｇｒａｔｉｏｎｓｙｓｔｅｍｂａｓｅｄｏｎＷｅｂＳｅｒｖｉｃｅｓａｎｄｕａｒｔｚＱ：１４１２１作者姓名：焦继笑学号６０３导师姓名：孔令波职称：讲师工程硕±专业领域：软件工程学位级别：硕±北京交通大学２０１６年６月Ｉ致谢本论文是在我的导师孔令波老师的悉也指导下完成的，孔老师严谨的治学态度和科学的

4、工作方法给了本人极大的帮助和影响。在此衷也感谢孔令波老师两年来在学习上和生活上对本人的关必和鼓舞。我十分感谢北京交通大学给予帮助的老师们，他们不但传授了我专业知识技、。术，最重要的是教会了学习方法，让我知道如何学习怎样学习我同时要感谢这篇论文所涉及到的各位学者。本文引用了各位学者的文章作为参考文献，我是在各位学者的研究成果的帮助和启发下，站在巨人的肩膀上完成了本篇论文的写作。在巧写论文期间，同学和同事们对本人论文中的研究工作给予了热情帮助，在此向他们表达本人的感激之情。在今后的工作中，我将认真工作，用自己所学的知识服务社会。

5、最后要感谢我的家人，在论文撰写的过程中，是他们给了我无私的理解与支。持，才能够使我更加专必的完成我的学业ｎＩＩｉ北京交通大学硕±专业学位论文摘要摘要随着大数据时代的到来，数据对于企业的重要性越来越凸显，要求企业之间、企业内部各部口之间数据资源能够实现共享、交换、整合集成和再利用。但是由于业务差异和信息化建设周期不同，数据资源分散的存储于不同的网络节点中，一一系统，服务于单，逐渐形成了个个信息孤岛。导致数据的利用率低下数据潜在的价值没有得到充分发挥。大数据时代背巧下，数据整合成为关键，企业通过对分散的数据源进

6、行数据提取、数据转换、数据存储和数据分析处理来实现数据资源最大限度的利用。本文设计的数据整合系统旨在Ｗ整合有关应急数据为主题，收集整合来自中石油各企业不同数据源中的数据资源，为中石油应急管理系统的正常有效运作提供数据服务支巧。本系统使用ＷｅｂＳｅｒｖｉｃｅｓ技术结合数据仓库来整合分散异构的数据资源。通过ＸＭＬ转换数据，屏蔽数据异构性，使用Ｑｕａｒｔｚ定时调度Ｗｅｂ服务，定期更新数据仓库中的数据，保持数据的活力。、作者本人参与了数据整合系统建设的整个生命周期过程，从系统巧求分析系统环境搭建与测试、数据库表设计、数据结构映射设计、代

7、码实现与测试到系统上线后运维和性能优化等全部过程：。具体工作内容如下（１）参与了系统的需求分析，确定收集数据的主题、主题内容Ｗ及主题之间的关系，并制定相关文档，（２）参与了系统开发环巧的巧建，通过调研己有的数据整合解决方案，结合实际巧要。，整合不同的框架，并测试框架的可用性（３）采用从对象模型到物理模型方式设计数据库主题表，并且设计数据库表与ＸＭＬＳｃｈｅｍａ的结构映射规则，编写并维护ＸＭＬＳｃｈｅｍａ定义文件。（４）参与了大量的ＷｅｂＳｅｒｖｉｃｅｓ客户端应用程序的开发与測试工作。（５）系统上线后，逐渐发现系统的性能越

8、来越差，经过分析日志，采