开题报告数据交换平台数据交换节点集群研究

《开题报告数据交换平台数据交换节点集群研究》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、研究生学位论文开题报告报告题目数据交换平台中数据交换节点集群研究与实现学生姓名朱蕾学号2011E8015070012指导教师叶丹职称副研究员学位类别工学硕士学科专业计算机软件与理论研究方向网络分布式计算与软件工程培养单位软件研究所填表日期2013年6月20日研究生院制填表说明1.本表内容须真实、完整、准确。2.“学位类别”名称填写：哲学博士、教育学博士、理学博士、工学博士、农学博士、医学博士、管理学博士，哲学硕士、经济学硕士、法学硕士、教育学硕士、文学硕士、理学硕士、工学硕士、农学硕士、医学硕士、管理

2、学硕士等。3.“学科专业”名称填写：“二级学科”全称。7目录1.选题的背景及意义42.国内外本学科领域的发展现状与趋势62.1数据交换相关工作62.1.1数据交换技术62.1.2数据交换平台产品82.2集群技术112.2.1集群分类112.2.2集群框架122.2.3负载均衡技术133.课题主要研究内容、预期目标143.1课题研究内容143.1.1集群管理143.1.2负载均衡143.1.3失效恢复153.1.4集群监控163.2课题预期目标174.拟采用的研究方法、技术路线、实验方案及其可行性分析174

3、.1研究方法174.2技术路线174.3实验方案184.4可行性分析185.已有科研基础与所需的科研条件186.研究工作计划与进度安排19参考文献2071.选题的背景及意义随着信息技术应用的快速深入，企业信息化水平不断提高，大中型企业和机构纷纷建立起庞大而复杂的信息系统，这些信息系统的建设通常具有阶段性和分布性的特点，导致了“信息孤岛”的存在和数据不一致等问题；此外，企业中分布的数据、信息和知识通常具有独立性和异构性，降低了信息的利用效率，很难实现企业商务智能的要求。随着企业对系统整合需求的持续增强，越来

4、越多的企业在重视应用集成的同时，将数据集成作为重要支撑技术之一[1]。数据集成（DataIntegration）是将不同来源、格式的数据在逻辑上或物理上集成共享，是通用的数据整合、数据同步、数据迁移的解决方案。目前三种主要的数据集成方法包括联邦数据库、数据仓库和数据集成中间件系统。其中，数据集成中间件提供了一种轻量级的数据集成方案，是目前比较流行的数据集成方法。在这些数据集成方法中，ETL即跨操作系统、跨数据源的数据抽取(Extract)、转换(Transform)和装载(Load)是一项极其重要的技术，

5、它从分布式异构的数据源（包括数据库、应用系统、文件以及Web服务等）中抽取数据，并按照一定的规则进行转换，最终加载到目标数据源中，从而解决数据一致性与信息集成化问题，实现数据、信息和知识的共享和集成。数据交换平台基于统一的中间件平台，通过提供客户接入端软件和前置交换节点部署在应用系统上，用统一的方式实现各系统间不同结构和格式的数据的相互交换。数据交换平台是一个分布式系统，由分布在广域网中各机构、组织的局域网内的数据交换节点组成，如图1-1所示。77图1-1数据交换平台结构图7一个数据交换节点包含数据传输

6、、数据ETL、监控、路由等子系统，对应一7个或多个数据源。一个数据交换平台属于一或若干个公司、组织。一个机构或7组织的某一个分支拥有一个数据交换节点，每一个数据交换节点位于公司或组织的一个分支的局域网内，和该机构或组织的其他分支，以及其他机构和组织的进行数据交换。一个数据交换平台的各个数据交换节点是强连通的。不同的数据交换节点之间可以进行数据交换。数据交换节点要采取集群的形式，原因如下：1.高性能需求。数据交换平台的并发处理较大、数据量大。一个公司或组织通常会有一个中心。当数据向中心的数据交换节点汇总时

7、，受网络带宽、机器CPU处理能力、内存、程序处理的极限等因素影响，中心的负载会很大。单机模式会出现机器死机、程序崩溃、处理速度低于要求等一系列问题。采取集群的方式可以大大提高数据交换节点的处理能力。2.高可用性需求。数据交换的时间具有不确定性，数据交换节点需要保持77×24的连续不断的运行。。在单机的情况下，一旦机器出现故障，需要7人工干预程序的运行，把未完成的任务重新完成。采用集群的方式，一台机器的故障不会影响数据交换节点的正常运行，保证了系统的高可用性。而且，工作人员只需将故障机器替换或重启，重新安

8、装或运行程序，不需要关注任务的执行状况，大大降低了管理成本和系统整体效率。OnceDI2.0（OpenNetworkComputingEnvironmentDataIntegration）是中科7院软件所软件工程技术中心自主开发的数据集成中间件，实现了基于中间件技术的数据集成方案。提供了跨平台、跨数据源的异构数据集成。OnceDI2.0不仅实现了跨数据源的数据抽取、转换和加载，而且支持复杂网络环境下的数据高效、安全传输，因此能