云端数据管理系统的设计

《云端数据管理系统的设计》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、云端数据管理系统的设计蔺小清UNXiao-qing(陕西国际商贸学院，咸阳712046)(ShaanxiInstituteofInternationalTrade&Commerce,Xianyang712046,China)摘要院互联网的快速发展使每H产生的庞大数据的存储和冗余备份，成为技术领域亟待解决的问题，低成木高效运行的数据存储管理系统成为研究的主流，木文的研究目标是基于云计算技术的云端数据管理系统，实现从普通用户到企业用户的云端数据存储、数据检索和相应的管理服务，同时支持系统的快速可扩展以及数据备份和安全恢复。Abstract

2、:TherapiddevelopmentofInternetmakesthedailyproducedhugedatastorageandredundantbackupbecomeanurgentproblemoftechnology.Lowcostandefficientoperationofdatastoragemanagementsystemhasbecomethemainstreamintheresearch.Theresearchobjectofthispaperistheclouddatamanagementsystembased

3、oncloudcomputingtechnology,whichcanrealizeclouddatastorage,dataretrievalandcorrespondingmanagementservicesfromordinaryuserstocorporateusers,andatthesametimesupportsystemandextensibledatabackupandrestoresecurity.关键词院云计算；数据缓存；数据可靠性Keywords:cloudcomputing；datacache；datareliabi

4、lity中图分类号院TP315文献标识码院A文章编号院1006-4311(2014)27-0242-020引言随着学术界和业界对于大容量数据存储和高性能计算需求的增加，传统的数据存储解决方案己经很难满足用户日渐增长的数据存储、管理和容灾备份需求。在这样的背景下，云存储技术应运而生。1云存储的产生和意义随着技术的进展，存储数据转移的趋势正在逐漸形成。每一天都有大量的新数据被创建，需求量与日倶增，如何安全便捷的获取到这些数据便成了当下各企业的IT部门以及各大供应商的一个首要问题。传统的数据存储解决方案，由于扩展性差，技术架构过于老旧，当用户数据不

5、断增加吋，只好通过添加高端存储设备予以解决。而随着系统整体运行环境变得日益复杂，管理和运营成本不断推高，产生了更多的能源消耗。针对这一问题，形成一个大规模的、高性能低成本的解决方案即基于云计算的云存储技术。而客户也将通过实时压缩功能、复制和数据迁移的改进来体验到数据管理系统效率的提升。云存储是在云计算(CloudComputing)概念上延伸和发展出来的一个新的概念，当系统主要提供海量数据存储和管理服务时，那么云计算系统就转变成为一个云存储系统，所以云存储是一个以数据存储和管理为核心的云计算系统［1】。2云端数据管理系统设计S标本文的设计S标

6、是完成-个基于云计算技术的数据管理系统的设计。系统依据分布式系统的部署方式，通过提供存储节点集群以及管理节点，创建系统的底层硬件环境。冋吋利用NoSQL数据库MongoDB的分布式特性，进行海量数据的存储，索引和管理。在此基础之上，利用二级数据缓存技术，引入Memchache加强数据的聚合以及数据的快速返回，提供较好的用户使用体验［2-3］。冋时对于系统的I/O操作进行有效优化，以期提供更快更有效的数据访问方式。在系统的可扩展性方面，则依靠MongoDB在部署工程中提供的弹性，满足了大规模数据访问服务的需要。该设计方案集中体现了当前基于云计算

7、技术的分布式数据管理系统的设计与实现上的常用思路和解决方式。以下是主要的系统设计目标：淤系统能够支持并发用户访问数目要达到10万规模，即能同时支持数十万在线访问；于系统能够支持PB级数据访问量，冋吋保证数据可靠性和数据的无差错访问；盂系统能够支持大并发，大数据量访问的同吋，保证系统页面的响应吋间在5秒钟以内；榆系统能够支持横向分布式扩展。只需要通过集群的服务器数量的递增，即可满足系统扩展需求；虞系统能够提供管理员界面，并且用来进行集群的tl常维护和特殊情况下的系统监控和数据可靠性。3云端数据管理系统的功能结构基于云计算技术的数据管理系统，其在

8、线数据存储端需要提供的功能是对于用户的操作界面以及与后台逻辑层面的接U支持，其中包括：用户管理，数据管理，后台系统管理，以及高可用性管理等功能模块。用户管理模块:该