基于hadoop的数字迎新系统的设计与实现

《基于hadoop的数字迎新系统的设计与实现》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、基于Hadoop的数字迎新系统的设计与实现曲阜师范大学网络信息中心针对高校在迎新工作屮存在的问题，提出棊于开源云计算lladoop的数字迎新系统。本文通过分析系统建设目标与业务流程，并运用Web系统分层技术、MVC设计思想以及Hadoop数据云存储技术进行研发。该系统既可以提高迎新工作效率和迎新服务质量，缩短系统的响应时间，乂可以保证数据的安全性和一致性，更好地方便用户的使用。关键词：云计算;Hadoop;数字迎新系统;云存储技术;Designandimplementationofdigitalgreetingsys

2、tembasedonHadoopQufuNormalUniversityNetworkInformationCenter;Abstract：Inthispaper,throughtheanalysisofsystemconstructiongoalsandbusinessprocesses,andtheuseofWebsystemlayeringtechnology,MVCdesignideas,andHadoopdatacloudstoragetechnologyresearchanddevelopment分The

3、systemcannotonlyimprovetheworkefficiencyandtheservicequalityofnewarrival,shortentheresponsetimeofthesystem,butalsoensurethesafetyandconsistencyofdata,andmakeiteasierforuserstouseit分Keyword：cloudcomputing;Hadoop;digitalorientationsystem;cloudstoragetechnology;0引

4、言学校各个部门拥有的新牛.数据是相对独立的，有些部门有自成体系的系统、有些部门仍然使用手工操作。即使有系统，这些自成体系的系统之间信息是独立的，这样就会形成信息孤岛，没有专门围绕“迎新”汇总的平台，部门与部门之间无法协同，没有共享。迎新工作不仅费时费力、容易出错，而且难以在规定的时间内完成。因此，建设一个崭新的迎新服务平台，既解决了现有问题，又符合学校信息化建设的中长期发展目标，具有重大意义。高校迎新模式从纸质迎新方式转变为以访问浏览器或移动APP为主的数字化模式。m然而，在迎新工作屮仍有很多不足。学校各迎新部门拥有

5、的新生信息都是相对独立的，各部门工作和各个系统没有协同、共享，迎新工作不仅费时费力、容易出错，而且难以在规定的时间内完成。随着信息时代的发展，结合HadoopGl云计算技术设计开发数字迎新系统可以有效解决以上问题，更好的方便用户的使用。:字迎新系统建设目标数字迎新系统具备多种权限模型，并能为其他管理平台幵发提供标准化接口，实现数字迎新的全过程化管理功能。[3][4]建设目标如下。(1)建设一个数字迎新网站，全方位的介绍学校的迎新工作，并提供给学生一个登荥的入门，其登荥系统后可查询或修改个人信息，上传照片，贫困生申请、

6、查询到专业、班级情况等。(2)在数字迎新管理系统中实现学生基本信息的管理功能，包括单个管理、批量管理功能，支持通过多种方式进行导入。(3)在数字迎新管理系统中实现新生现场报到、缴费、一卡通发放、宿舍入住信息等报到流程的管理功能。(4)在数字迎新管理系统中实现报到流程的全过程统计分析功能。2数字迎新系统的基础架构与业务流程2.1迎新系统基础架构数字迎新系统采用的是B/S结构。该结构的组成部分主要有:云端棊础架构、虚拟云端数据库服务器、管理服务器、虚拟云端WEB服务器和客户软件(浏览器)。传统的Web应用系统通常采用数据

7、访问层、业务逻辑层和表示层这三层结构模式。该模式的优点是系统结构清晰、功能单一，同时方便系统的维护、扩展以及升级。[5]通过比较可以发现传统的三层结构模式和MVC模式并不冲突，而是相互关联，两者可以有机地结合。本平台采用MVC£§1设计思想，将传统的三层结构扩展为多层，如表示层、控制器层、业务访问层、数据访问层、数据载体层等。多层开发技术能够将系统中某一功能的实现过程分解成几个独立的阶段，每个阶段单独设计并实现，不仅有效地分解任务，减少了任务间的干扰，而II降低了设计难度，方便了功能的实现，提高了开发效率。本文采用H

8、adoop分布式文件系统HDES进行大数据资源的存储。Hadoop作力Apache基金会的开源项目，模仿Google的核心技术，是一个分布式系统的基础,是最典型和最常见的云计算平台，目前在业界和应用行业尤其是互联网行业得到了广泛应用，是目前“云存储”计算环境中的重要基础软件，完成系统中大数据资源的存储。2.2迎新系统业务流程数字迎新系统从业务处