基于web数据挖掘信息综合服务系统分析的研究与设计

《基于web数据挖掘信息综合服务系统分析的研究与设计》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、基于Web数据挖掘的信息综合服务系统ADissertationSubmittedtoShanghaiJiaoTongUniversityforMasterDegreeofEngineeringCOMPREHENSIVEINFORMATIONSERVICESYSTEMBASEDONWEBDATAMININGUniversityCode：10248Author：WangLiYongStudentID:1090379291Mentor1：WuGangMentor2:JiaoJianMinField：SoftwareEngineeringDateofOralDefense：December2

2、7,2012SchoolofSoftwareShanghaiJiaotongUniversityDec,2012万方数据基于Web数据挖掘的信息综合服务系统上海交通大学学位论文原创性声明本人郑重声明：所呈交的学位论文，是本人在导师的指导下，独立进行研究工作所取得的成果。除文中已经注明引用的内容外，本论文不包含任何其他个人或集体已经发表或撰写过的作品成果。对本文的研究做出重要贡献的个人和集体，均已在文中以明确方式标明。本人完全意识到本声明的法律结果由本人承担。学位论文作者签名：日期：年月日万方数据基于Web数据挖掘的信息综合服务系统上海交通大学学位论文版权使用授权书本学位论文作者完全了

3、解学校有关保留、使用学位论文的规定，同意学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。本人授权上海交通大学可以将本学位论文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。保密□，在年解密后适用本授权书。本学位论文属于不保密□。（请在以上方框内打“√”）学位论文作者签名：指导教师签名：日期：年月日日期：年月日万方数据基于Web数据挖掘的信息综合服务系统万方数据基于Web数据挖掘的信息综合服务系统万方数据基于Web数据挖掘的信息综合服务系统基于Web数据挖掘的信息综合服务系统的分析与设计摘要随着信息技术的迅猛

4、发展和广泛应用，特别是我国国民经济和社会信息化进程的全面加快，互联网的基础性、全局性作用日益增强，已成为国家和社会发展的新的重要战略资源。与此同时互联网也给国家安全、社会稳定带来了严峻的挑战。近年来，一些群体性事件、突发事件和热点、敏感问题在网上被恶意炒作，形成了强大的网上舆论气候，各种煽动组织、串联等信息通过互联网的各种服务方式快速、广泛传播，严重威胁社会稳定，网上有关社会稳定和国家安全的问题已经十分突出。目前，国内主要从事互联网舆情监控技术研究的机构是人民日报社网络中心舆情监测室。政府机关开展网络监察工作的单位主要是公安机关，而公安部门开展互联网舆情监控工作的主要是网络监察部门。

5、对于公安机关其他部门开展网络舆情监控工作则是通过人工网上巡控的方式实现的，那样工作效率低，信息采集量小，获取有价值信息比较困难。因此，建立一种互联网舆情监控的机制是非常必要和紧迫的。本项目就是基于以上目的进行设计和研究的。本系统的设计是基于作者本身实际工作的需求，按照功能划分主要分为：ETL数据获取子系统、面向业务的数据处理子系统、数据挖掘子系统、信息综合服务子系统四部分。ETL数据获取子系统的功能定位是实现对一些重点网站、论坛、网页微博和博客的相关Web数据的获取、转换、导入；面向业务的数据处理子系统的功能定位是对ETL数据获取子系统获取的数据根据业务需求进行数据再加工；数据挖掘子

6、系统的功能定位是对再加工的分类数据进行数据挖掘，从中发现对我们来说有价值的情报信息；信息综合服务子系统的功能定位是为系统用户提供信息综合查询服务，并为本地区本部门业务人员参与面向业务的数据再加工提供界面接口。数据仓库和数据挖掘技术的应用是本系统的关键，他们直接决定了本系统的实现是否能达到我们的预期。本文首先介绍了数据仓库的一般理论知识、Web数据挖掘技术的研究与发展；接着从用户的角度对本系统的设计进行了相应的需求分析；重点研究和讨论了在本系统中数据仓库维度模型设计、数据挖掘技术的实现和应用；最后对系统测试和试运行情况进行了一个简单的说明，并对项目的研发进行了展望。I万方数据基于Web

7、数据挖掘的信息综合服务系统关键词数据仓库，Web数据挖掘，四层架构，ETL，焦点II万方数据基于Web数据挖掘的信息综合服务系统COMPREHENSIVEINFORMATIONSERVICESYSTEMBASEDONWEBDATAMININGABSTRACTWiththerapiddevelopmentandwideapplicationofinformationtechnology,inparticular,fullspeeduptheprocessof