数据分析系统的设计与实现论文

《数据分析系统的设计与实现论文》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、数据分析系统的设计与实现毕业论文目录一、概述11.1课题背景与研究意义11.1.1课题背景11.1.2研究现状31.1.3研究意义31.2论文结构4二、微博消息传播模型42.1微博消息传播的特点42.2微博用户状态62.3微博意见领袖72.4微博传播模型9三、微博舆情管理平台的设计与实现123.1微博舆情管理平台的总体流程123.2数据分析系统设计流程13四、微博舆情管理平台的实现144.1样本选取与数据来源144.2微博数据转化154.3微博文本聚类174.3.1文本聚类定义174.3.2机器学习18564.3.3K-means算法194.4微博意见领袖重要

2、性评估214.4.1PageRank算法214.4.2WeiboRank算法224.4.3算法对比234.5微博舆情预警模块254.5.1微博舆情预警254.5.2趋势分析模块264.6趋势分析结果比较29五、结论与展望315.1系统不足315.2未来展望325.2.1改进预期325.2.2新增功能325.3结束语33参考文献34附录Ⅰ：翻译原文35ClusterAnalysis:BasicConceptsandAlgorithms351Overview401.1.1WhatIsClusterAnalysis?401.1.2DifferentTypesofCl

3、usterings411.1.3DifferentTypesofClusters442.RoadMap47•K-means47•AgglomerativeHierarchicalClustering48•DBSCAN48附录Ⅱ：中文翻译48聚类分析：基本概念及算法481概述51561.1.1什么是聚类分析？511.1.2不同类型的群集合521.1.3簇的不同类型532.路线图56•K-means算法56•凝聚层次聚类56•DBSCAN565656北京交通大学毕业设计（论文）第页一、概述1.1课题背景与研究意义1.1.1课题背景随着时代的进步，技术的发展和web

4、2.0时代的到来，网络舆情也呈现蓬勃发展的势头，截至2012年12月底，我国网民规模达5.64亿，手机网民规模也已达到4.20亿，我国微博用户规模为3.09亿，较2011年底增长了5873万，网民中的微博用户比例较上年底提升了六个百分点，达到54.7%。相当一部分用户访问和发送微博的行为发生在手机终端上，截至2012年底手机微博用户规模达到2.02亿，即高达65.6%的微博用户使用手机终端访问微博。微博，即微博客（MicroBlog）的简称，是一个基于用户关系信息分享、传播以及获取平台，用户可以通过WEB、WAP等各种客户端组建个人社区，以140字左右的文字更

5、新信息，并实现即时分享。美国埃文·威廉姆斯推出的twitter是最早的微博平台，也是目前最著名的平台。2007年，中国第一家带有微博色彩的网站“饭否网”开张，到2009年新浪微博的开通，中国第一家推出微博的门户网站，微博正式进入中文上网主流人群视野。2011年10月，中国微博用户总数达到2.498亿，成世界第一大国。微博成为网络舆情的一大组成部分。舆情是“舆论情况”5656北京交通大学毕业设计（论文）第页的简称，是指在一定的社会空间内，围绕中介性社会事件的发生、发展和变化，作为主体的民众对作为客体的社会管理者及其政治取向产生和持有的社会政治态度。它是较多群众关

6、于社会中各种现象、问题所表达的信念、态度、意见和情绪等等表现的总和。对于舆情的内涵，国内的研究者们有着不同的认识。有研究者指出：“所谓‘舆情’，实际上就是大众密切关心的热门话题或反映了某些社会心理的观点与看法，其较高层次是‘思潮’，基本层次是‘情绪’。大众传媒对此应该有足够的敏感，并以恰当的方式进行舆论引导，减少社会震荡。”另有研究者认为：“舆情即民意情况，涉及公众对社会生活中各个方面的问题尤其是热点问题的公开意见(外露的部分)或情绪反应(既可能外露又可能不外露的部分)。”更多的学者倾向于如下认识：“舆情是指在一定的社会空间内，围绕中介性社会事件的发生、发展和

7、变化，民众对社会管理者产生和持有的社会政治态度。如果把中间的一些定语省略掉，舆情就是民众的社会政治态度。”这一定义将舆情界定为民众的社会政治态度，突出了民众与国家管理者之间的关系，抓住了舆情的核心，因此本文在以下的论述中，也采用这一定义。任何一种技术的出现及发展，或多或少会对社会生活造成一定的冲击和影响。网络从诞生的那一天起，就开始深刻地影响人们的生活、学习、思考、交流和娱乐的方式。与此同时，现实生活与虚拟世界交互影响，呈现出一种你中有我、我中有你的局面。以网络为平台，通过新闻、评论、发帖、回复等为载体表现出来的舆情，就是网络舆情。以网络为载体的网络舆情，核心

8、是单个或多个事件，是海量网民感情、态度