[精品]基于大数据的高校决策分析系统的构建

《[精品]基于大数据的高校决策分析系统的构建》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、基于大数据的高校决策分析系统的构建基丁大数据的高校决策分析系统的构建摘要：随着计算机技术和互联网以及物联网的不断发展，“大数据”时代已经到来。针对现有的大数据集合建立决策分析系统，对高校决策分析具有重要的实际意义。本文首先介绍高校建立基于大数据的决策分析系统的背景，然后分别从基于大数据的数据存储方式、决策分析系统的层次结构及实现三个方而介绍基于大数据的高校决策分析系统的构建。关键词：大数据；数据存储方式；数据立方体中图分类号：TP311.13随着计算机技术和互联网以及物联网的不断发展，各种系统结构化和非结构化数据以前所未有的惊人速度迅

2、猛增长，“大数据”时代已经到来。大数据是指数据结构比较复朵、数据规模大的数据集合。其数据量已经远远超出了一般数据管理工具可以承受的处理时间以及数据处理及存储管理能力o在当今大数据环境下，高校管理系统的数据结构及数据量发生了口大的变化。在数据存储、数据管理、数据分析及数据挖掘等方面面临着巨大的机遇和挑战。为了有效地利用大数据为高校决策分析提供更好的服务，我们必须基于大数据建立相应的决策分析系统。耳前许多高校已积累大量的教学资源和管理数据，从而形成了规模巨大、结构复杂的数据集，为高校的教学管理决策提供了强有力的支持，成了高校教学管理不可缺

3、少的一部分。随着教学改革的不断推进，高校对数据的需求已经从原来的简单事务处理方式转向面向信息分析处理、数据挖掘及决策支持等。因此，针对现有的大数据集合建立决策分析系统，对高校决策分析具有重要的实际意义。决策分析系统是目前知识发现和数据管理领域中的一项重要技术，它基于神经网络算法、机器学习及人工智能等方法进行数据挖掘和知识发现，从而在大数据中获取数据之间内在的相互联系，以及其中可能存在的某种规律，从而帮助决策者快速做出正确的决策，进而提高高校教学管理的科学性，为高校带来良好的决策管理。1基于大数据决策分析系统的数据存储方式高校基于大数据

4、决策分析系统存储数据主要是从校内外各种数据源中获得最原始数据，并对该部分数据进行整合形成数据层,然后将数据层中的数据经过抽取、清洗、转换、装载进入数据仓库从而形成支撑层，在支撑层的基础上，可以根据需求对数据进行挖掘分析，从而构建决策层。当前高校基于大数据决策分析系统的数据存储方式包括基于关系数据库的存储、基于多维数据集存储和虚拟化存储3种数据组织方式。1.1基于关系数据库的存储方式该存储方式主要依托关系数据库存储数据，基于关系的数据存储方式是将分析决策系统中的数据存储在关系型数据库的表中，同时在元数据的管理下进行数据存储管理，从而完成

5、数据分析、决策支持功能。该存储方式在构建数据库吋主要采取以下步骤进行数据的抽取：首先，利用图形化的操作界面进行操作，用户能够对关系数据库的数据进行选择操作，同时可以建立和定义多维度数据模型；然后，采用特定程序从关系数据库中抽取某一维度数据。基于关系数据库的存储方式不是简单的从业务系统中抽取数据，而是对业务系统中的数据进行清洗、加工、汇总和整合，从而保证基于大数据分析决策系统内的需要，是针对高校全局的一致的数据。总Z,基于关系数据库存储方式要求将学校内各个业务系统的原始数据整合，从而用来支持特定的查询、统计分析和决策支持，以便管理层对某

6、一阶段历史数据进行统计分析。1.2基于多维度的数据集存储方式基于多维度的数据存储方式和基于关系的数据库存储方式不同，是采用数据立方体的方式管理与存储数据，同时以多维度显示与组织数据，是一种基于在线联机分析处理(OLAP)的数据组织形式。该数据存储方式主要采用多维数组结构文件进行数据存储，同吋具有不同维度索引及数据管理文件与数据一一对应。该数据存储方式采用“多维数据集(CUBE)”,多维数据集将传统的二维关系表组合成多维数据立方体，数据属性对应为维度(Dimension),在数据属性下的值被称作度量(Measure)□也就是说，将数据由

7、传统的二维关系表组合成多维度立方体，在数据立方体上进行切块(Dicing)与切片(Slicing)、旋转(Turning)、上卷(Rolling-up)、下钻(Drilling-down)等一系列操作(如图1)。图1数据立方体的上卷、下钻等一系列操作1・3基于虚拟化的数据存储方式虚拟化存储方式主要有两种存储方式，第一种是将企业内外部结构化和非结构化数据整合到单一的数据存储平台上，从而形成一个单一的数据存储资源池，这样有利于存储基础设施进行统一管理，从而容易实现数据资源共享、存储容量冋收和存储空间最大化利用，进而更好的实现存储设施的重复

8、使用，最终实现提高存储基础设施容量效率，以满足当前基于大数据的决策分析系统的需要。第二种存储方式是仅从逻辑上进行整合，也就是说，决策分析系统中没有专门的存储空间，系统中的所有数据…律存储在源业务系统的数据库中，根据决策分