基于文本挖掘的网络舆情监控与分析系统的研究与实现

《基于文本挖掘的网络舆情监控与分析系统的研究与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、学校代号10532学号G132460268分类号TP302密级工程硕士学位论文基于文本挖掘的网络舆情监控与分析系统的研究与实现学位申请人姓名唐立培养单位信息科学与工程学院导师姓名及职称杨科华副教授侯亚华副研究员学科专业软件工程研究方向软件项目管理论文提交日期2016年11月18日学校代号：10532学号：G132460268密级：湖南大学工程硕士学位论文基于文本挖掘的网络舆情监控与分析系统的研究与实现学位申请人姓名：唐立导师姓名及职称：杨科华副教授侯亚华副研究员培养单位：信息科学与工程学院专业名称：软件工程论文提交日期：2016年11月18日论文答辩日

2、期：2016年11月25日答辩委员会主席：罗娟教授ResearchandImplementationofNetworkPublicOpinionMonitoringandAnalysisSystemBasedonTextMiningByTangLiB.E.(GuiZhouUniversity)2011AthesissubmittedinpartialsatisfactionoftheRequirementsforthedegreeofMasterofEngineeringInSoftwareEngineeringintheGraduateSchoolO

3、fHunanUniversitySupervisorAssociateProfessorYangKeHuaAssociateResearcherHouYaHuaNovember,2016湖南大学学位论文原创性声明本人郑重声明：所呈交的论文是本人在导师的指导下独立进行研究所取得的研究成果。除了文中特别加以标注引用的内容外，本论文不包含任何其他个人或集体己经发表或撰写的成果作品。对本文的研宄做出重要贡献的个人和集体，均己在文中以明确方式标明。本人完全意识到本声明的法律后果由本人承担。■作者签名：凑１日期：义戊６年》＞月３日学位

4、论文版权使用授权书，＊．＊本学位论文作者完全了解学校有关保留、使用学位论文的规定，同意学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。本人授权湖南大学可以将本学位论文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。本学位论文属于１、保密□。，在年解密后适用本授权书２、不保密ＥＬ“”（请在以上相应方框内打Ｖ）作者签名日期：年Ｕ月艾日导师签名：曰期：＞＾丨厶年丨＞月ｊｒ曰基于文本挖掘的网络舆情监控与分析系统的研究与实现摘

5、要互联网已成为当今人们思想文化信息的集散地，正变为一种全民化的舆论工具。近年来，网络舆情的影响越来越大，人民对其关注度也越来超高。为了有效监控网络舆情热点信息，合理开展网络舆情引导工作，避免不良态势的蔓延，迫切需要提高互联网舆情监控管理的能力和技术手段。本文首先在对国内外舆情监控及其应用系统的发展过程、建设经验、研究成果进行总结的基础上，结合国内现行解决手段和解决方案，对舆情系统的主要需求进行了整理和优化，得出了系统的需求。主要包括数据采集及预处理需求、舆情监控与分析需求、应用展现及管理需求、业务治理需求、系统安全及性能需求等内容。其次，文章基于网络爬

6、虫、正文提取、中文分词及语义分析、文本聚类等技术手段，从舆情数据特点、数据采集方式、数据传输与存储机制、功能实现特性等角度给出了舆情监控与分析系统的整体架构以及设计思路。并从基础设施平台、数据采集、信息预处理、监控分析处理、Web应用这五个角度阐述了系统功能模块的设计方案，同时，文章也给出了系统的业务流程分析及优化、部署架构及实现途径。最后，文章在上述需求分析、规划设计基础上，结合作者的实际工作经验，给出了系统的详细设计流程与实现方案。包括：对舆情数据采集、预处理模块进行了流程设计、功能设计，并给出了功能实现方案；基于向量空间模型及TF‐IDF算法、中

7、文分词及DOM剪枝算法、文本聚类SinglePass算法等技术，对舆情分析模块的话题监控与跟踪、舆情热点筛选、敏感话题识别等子模块给出了详细的流程、模块功能设计及实现方案；从舆情展示、系统配置、信息检索、安全管理等角度基于MVC架构给出了Web应用的功能设计与内容实现。系统的应用提高了政府对网络舆情的掌控能力，能够及时将不利于政府和公众的网络信息及时消除，维护社会的稳定。关键词：舆情监控分析；数据采集；数据挖掘；文本聚类II工程硕士学位论文AbstractTheInternethasbecomethepeople'sideologicalandcult

8、uralinformationofthedistributioncenter,isbecomi