基于大数据架构的智慧校园探索

《基于大数据架构的智慧校园探索》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、基于大数据架构的智慧校园探索电子科技大学信息中心颜凯目录n信息化发展规划n校园大数据的价值发现与高校管理的创新服务n展望1、信息化发展规划电子科技大学“十三五”信息化发展规划已有基础发展目标“智慧成电”经过“十二五”的建设已达达到“1-2-3-4”实现学校教学、科研、管理、到的基础服务四个方面的深度融合1.1已有基础已建成稳定可靠的校园网,实现全天候网络保障建成沙河校区、清水河校区校园基础网络，具有万兆主干，支持IPV4/IPV6双栈，同时具有教育网、电信和移动的公网出口（12G），信息点4万多个。1.1已有基础已建成全校统一的数据

2、中心，统一管理数字化校园硬件基础设施数字化校园机房小型机刀片服务器华为电子科大网络机房5G联合外场4台176台中心机房总占地PC服务器磁盘阵列及带库804平方米托管服216台9套智慧校园务机房机房智慧医疗存储总容量云服务机高性能房计算机房近1.05PB1.1已有基础实现数字化校园支撑平台，承载数据共享平台一统一身份认证平台平台二共享数据库平台平台三中间件平台平台四统一门户平台1.2“十三五”总体目标“1-2-3-4”一个核心任务•以建设“智慧成电”为核心任务两个工作层面•立足校级、院级两个工作层面三个建设愿景•面向无所不在的网络环境

3、、智能快捷的业务系统、随时随地的在线学习四个深度融合•实现学校教学、科研、管理、服务四个方面的深度融合1.3“智慧成电”建成新型数据中心，开展大数据分析建成基于虚拟技术的新型数据中心，建成开放式IT公共云服务平台。开展大数据分析，建立面向教务、科研、财务、资产等各个业务的数据库，为学校及各学院的重大决策提供数据支持。云服务平台CLOUD+SERVICE云计算平台CLOUD+COMPUTING云存储平台CLOUD+STORAGE2、校园大数据的价值发现与高校管理的创新服务电子科技大学大数据应用探索整体架构数据创新服务大数据应用的体系架

4、构来源-质量-安全围绕学生&教师数据建立模型2.1整体架构大数据应用体系架构2.2数据数据来源数据采集数据分析数据安全一卡通系统人事系统WIFI数据消费、门禁、交通学习经历、岗位聘任上网时间、访问网站图书馆系统科研系统校内网数据门禁、图书借阅科研项目、科研成果校内论坛、在线学习教务系统财务系统互联网数据选课、成绩、排名、评教预算执行、收支记录论文、专利、软著、人才简历2.2数据数据量数据采集数据分析数据安全结构化数据校内数据增量非结构化数据n存储量约0.9Tn刷卡数据每日新增8万条n简历、人才主页n论坛n业务数据库约11亿条数据n图

5、书馆数据每日新增7千条n论文、专利、软著（其中一卡通占40%）n选课数据每学期新增21万条n成绩数据每学期新增21万条2.2数据整合过程中的问题及解决方案数据采集数据分析数据安全数据源数据质量检测定义清洗规则搜寻错误并纠正格式不规范完整度检测标准化规则消除重复记录数据缺失准确度检测关联映射纠正属性错误准确性难保证纠正拼写错误数据不一致文本标准化2.2数据论文发表单位的名称标准化及影响力判定数据采集数据分析数据安全科研系统中的论文发表单位修正过后的发表单位名称论文发表单位的名称标准化及影响力判定：JOURNALOFAPPLIEDApp

6、l.Phys.PHYSICS1.去除重复的发表单位记录SciRep.Scientificreports2.谷歌检索不规整名称，采集第一页的谷歌检索结果RAREMETALMATERIALSANDRAREMETALMATERIALS3.计算原名称与谷歌检索结果之间的相似度，超过阈值的ENGINEERING(稀有金属材料ANDENGINEERING结果标记为发表单位的规整名称与工程)4.采用JCR分区、EI检索、CCF推荐、核心期刊等影响力ActaMetallurgicaACTAMETALLURGICA评价体系，建立索引，确定发表单位的影

7、响力等级Sinica(EnglishLetters)SINICAIEEEGlobalTelecommunic5.人工审核校验输出结果IEEEGlobecom2014ationsConference2.2数据数据质量数据采集数据分析数据安全深度学习预测算法数据降维稀疏编码、DBNARMA、SARMA、多元回归PCA、K-PCA、字典学习矩阵分解群体识别聚类算法SVD、QRuser-based、item-basedKmeans、混合高斯模型最优化方法主题模型分类算法SQP、L-BFGSLDA逻辑回归、隐式马尔科夫2.2数据数据安全数据采

8、集数据分析数据安全一级防护：数据接入防护二级防护：数据加密防护从部门接入加密数据，到平台后解密存储，不直接传输原后台数据匿名化映射，用户不真正接触实际数据，接触的始数据，防止数据泄露是匿名化和反匿名化数据三级防护：数据权限控制四级防护