浅谈数据挖掘技术

《浅谈数据挖掘技术》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、学园┃ACADEMY2011年01月浅谈数据挖掘技术李瑛包头轻工职业技术学院【摘要】数据挖掘技术为应对信息爆炸、海量信息的处理提供了科学和有效的手段。本文介绍了数据挖掘的概念、对象、任务、过程、方法和应用领域。【关键词】数据挖掘信息分析提取知识【中图分类号】TP311.1【文献标识码】A【文章编号】1674－4810（2011）01－0068－02社会的发展进入了网络信息时代，各种形式的数据海量库系统中，是长期积累的结果。但往往不适合直接在这些数产生，在这些数据的背后隐藏着许多重要的信息，如何从这据上进行知识挖掘，首先要清除数据噪声和与挖掘主题明显些数

2、据中找出某种规律，发现有用信息，越来越受到关注。无关的数据；其次将来自多数据源中的相关数据组合并；然为了适应信息处理新需求和社会发展各方面的迫切需要而发后将数据转换为易于进行数据挖掘的数据存储形式，这就是展起来一种新的信息分析技术，这种技术称为数据挖掘。数数据准备。据挖掘就是从大量的、不完全的、有噪声的、模糊的、随机2．数据挖掘的实际应用数据中，提取隐含在其中的、人们事先不知道的、数据挖掘就是根据数据挖掘的目标，选取相应算法及参但又是潜在有用的信息和知识的过程。数，分析准备好的数据，产生一个特定的模式或数据集，从一数据挖掘的对象而得到可能形成知识的模式

3、模型。数据挖掘可以在任何类型的数据上进行，既可以来自社3．模式评估会科学，又可以来自自然科学产生的数据，还可以是卫星观由挖掘算法产生的模式规律，存在无实际意义或无实用测得到的数据。数据形式和结构也各不相同，可以是传统的价值的情况，也存在不能准确反映数据的真实意义的情况，关系数据库、面向对象的高级数据库系统，也可以是面向特甚至在某些情况下与事实相反，因此需要对其进行评估，从殊应用的数据库，如空间数据库、时序数据库、文本数据库挖掘结果中筛选出有意义的模式规律。在此过程中，为了取和多媒体数据库等，还可以是Web数据信息。得更为有效的知识，可能会返回前面的某一

4、处理步骤中以反二数据挖掘的任务复提取，从而提取出更有效的知识。数据挖掘的目标是从海量数据中发现隐含的、有意义的四数据挖掘的常用方法知识。它的任务主要是分类、预测、时间序列模式、聚类分1．决策树方法析、关联分析预测和偏差分析等。决策树是一种常用于预测模型的算法，它通过一系列规1．分类则将大量数据有目的分类，从中找到一些有价值的、潜在的分类就是按照一定的标准把数据对象划归成不同类别的信息。它的主要优点是描述简单、分类速度快、易于理解、过程。精度较高，特别适合大规模的数据处理，在知识发现系统中2．预测应用较广。它的主要缺点是很难基于多个变量组合发现规则。预测

5、就是通过对历史数据的分析找出规律，并建立模型，在数据挖掘中，决策树方法主要用于分类。通过模型对未来数据的种类和特征进行分析。2．神经网络方法3．时间序列模式神经网络是模拟人类的形象直觉思维，在生物神经网络时间序列模式就是根据数据对象随时间变化的规律或趋研究的基础上，根据生物神经元和神经网络的特点，通过简势来预测将来的值。化、归纳、提炼总结出来的一类并行处理网络，利用其非线4．聚类分析性映射的思想和并行处理的方法，用神经网络本身结构来表聚类分析是在没有给定划分类的情况下，根据数据信息达输入和输出的关联知识。的相似度进行数据聚集的一种方法。3．粗糙集方法5

6、．关联分析预测粗糙集理论是一种研究不精确、不确定知识的数学工具。关联分析就是对大量的数据进行分析，从中发现满足一粗糙集处理的对象是类似二维关系表的信息表。目前成熟的定支持度和可信度的数据项之间的联系规则。关系数据库管理系统和新发展起来的数据仓库管理系统，为6．偏差分析粗糙集的数据挖掘奠定了坚实的基础。粗糙集理论能够在缺偏差分析就是通过对数据库中的孤立点数据进行分析，少先验知识的情况下，对数据进行分类处理。在该方法中知寻找有价值和意义的信息。识是以信息系统的形式表示的，先对信息系统进行归约，再三数据挖掘的过程从经过归约后的知识库抽取得到更有价值、更准确的

7、一系列数据挖掘使用一定的算法从实际应用数据中挖掘出未规则。知、有价值的模式或规律等知识，整个过程由数据准备、数因此，基于粗糙集的数据挖掘算法实际上就是对大量数据挖掘、模式评估、巩固知识和运用知识等步骤组成。据构成的信息系统进行约简，得到一种属性归约集的过程，1．数据准备最后抽取规则。数据挖掘的处理对象是数据，这些数据一般存储在数据（下转第70页）－68－万方数据学园┃ACADEMY2011年01月4．改善育人环境，抓好引导工作6．改进思想教育观念，坚持以人为本（1）管好教职工队伍，齐心协力做好学生的道德建设工关心学生疾苦，以真诚、平等、鼓励、信任的心态

8、，耐作。教职工要为人师表，在自身道德建设方面应给学生树立心地、深入细致地做好未成年学生的思想工