基于微博的用户关系分析系统的设计与实现

《基于微博的用户关系分析系统的设计与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、乂连键之大葦ＤＡＬＩＶＥＲＳＩＴＹＯＦＴＥＣＨＮＯＬＯＧＹＩＡＮＵＮＩ福破±享恆巧又ＭＡＳＴＥ民ＡＬＤＩＳＳＥＲＴＡＴＩＯＮ鐵基于微博的用户关系分析系统的设计与实现工程领域黄少斌作者姓名指导教师Ｍ＿＿￥２０１６年６月Ｉ日答辩日期专业学位硕±学位论文基于微博的用户关系分析系统的设计与实现ＤｅｓｉｎａｎｄＩｍｌｅｍｅｎｔａ村ｏｎｏｆＵｓｅｒＲｅｌａｔｉｏｎｓｈｉ乂ｎａｌｓｉｓＳｓｔ；ｅｍｇｐｐｙｙＢａｓｅｄｏｎＷｅ化ｏ：黄少斌作者姓名工程领域：软件工程学号：

2、３１４１７０１１指导教师：迎主完成日期：２０１６年３月１６日乂金巧义乂＃ＤａｌｉａｎＵｎｉｉｖｅｒｓｔｙｏｆＴｅｃｈｎｏｌｏｇｙ大连理工大学学位论文独创性声明作者郑重声明：所呈交的学位论文，是本人在导师的指导下进行研究工作所取得的成果。尽我所知，除文中已经注明引用内容和致谢的地方外，本论文不包含其他个人或集体已经发表的研究成果，也不包含其他已申请学位或其他用途使用过的成果一。与我同工作的同志对本研究所做的贡献均已在论文中做了明确的说明并表示了谢意。若有不实之处，本人愿意承担相关法律责任。学位论文题目：基于微博

3、的用户关系、分析系、统的设计与实现：《ｔ卸日：如／６年台月／日作者签名；期大连理工大学专业学位硕±学位论文摘要如今，人们已经习惯于通过社交网络来表达观点和情感，并与其他人进行互动，这其中蕴藏着许多有价值的信息。而社交网络的本质是将现实世界的人与人之间的联系映射到虚拟空间，用户关系显然是最重要的，。由于社交网络数据本身的商业价值研究人—员很难直接从互联网公司获取。因此，本文Ｗ目前最流行的社交网络平台新浪微博一为基础，，设计并实现了用户关系分析系统在定程度上解决了上述问题。首先，本文着重考虑用户的微博数据应该如何采集。微博数据的获取

4、途径大致有Ｈ种：新浪微博ＡＰＩ、网络爬虫Ｗ及第Ｈ方数据提供商。鉴于微博ＡＰＩ的诸多限制和第Ｈ方数据提供商的高昂收费，本文采用模拟登录和网页解析来实现多账号多线程Ｐｙｔｈｏｎ新浪微博爬虫，。然后本文分析微博内容、点赞、转发和评论的数据特点，发现它们不仅数据量大，而且格式比较灵活。因此，本文采用了ＮｏＳＱＬ数据库ＭｏｎｇｏＤＢ。同时，本系统通过搭建ＭｏｎｇｏＤＢ分片集群，实现了分布式存储，便于今后的存储扩展、分布式爬虫和并行计算，。最后，关于用户关系本文对博主的所有微博下的所有用户的点赞、转发和评论进行加权计算，得出用户对博主的关注度；若用户有点赞

5、行为则默认为博主的支持者，否则，对用户的所有转发和评论进行文本情感倾向分析，Ｗ此计算用户的情感倾向值关注度最高的若干点赞用户作为支持者，；取取情感倾向值最小的若干用户作为反对者；根据转发相同微博的数量分别对支持者和反对者进行内部分组。本系统通过网络爬虫获取某知名博主的微博数据，并将数据存储到ＭｏｎｇｏＤＢ分片，集群，。使用上述的用户关系分析策略系统得到了该知名博主的支持者与反对者。之后系统获取了支持者和反对者的微博数据，并对支持者与反对者内部进行了相应分组。最，，确认分析结果可信后对用户关系进行校验。关键词：微博；网络爬虫；ＭｏｎｇｏＤＢ；用

6、户关系；情感倾向－－１基于微博的用户关系分析系统的设计与实现ＤｅｓｉｇｎａｎｄＩｍｐｌｅｍｅｎｔａｔｉｏｎｏｆＵｓｅｒＲｅｌａｔｉｏｎｓｈｉｐＡｎａｌｙｓｉｓＳｙｓｔｅｍＢａｓｅｄｏｎＷｅ化０Ａｂ巧ｒａｃｔ了ｏｄａｙ，ｐｅｏｐｌｅａｒｃｕｓｅｄｔｏｅｘｐｒｅｓｓｏｐｉ打ｉｏ打ｓ，ｃｍｏｔｉｏ打ｓ，ａｎｄｉ打ｔｃｒａｃｔｗｉｔｈＯｔｈｅｒｐｅｏｐｌｅ０打ｓｏｃｉａｌｎｅｔｗｏｒｋｉ打ｇｔｏｏｌｗｈｉｃｈＣＯ打ｔａｉｎｓｌｏｔｓｏｆｖａｌｕａｂｌｅｉｎｆｏｒｍａｔｉｏｎ．Ｉ打ｔｈｅｓ

7、ｅｉｎｆｏｒｍａｔｉｏ打，化ｅ，ｕｓｅｒｒｅｌａｔｉｏ打ｓｈｉｐｉｓｃｌｅａｒｌｔｈｅｍｏｓｔｉｍｏｒｔａｎｔｂｅｃａｕｓｅ化ｅｅｓｓｅｎｃｅｏｆｓｏｃｉａｌ打ｅｔｗｏｒｋｉｎ化ｏｌｉｓｙｐｇｔｏｍａｐｔｈｅｒｅｌａｔｉｏｎｓｈｉｂｅｔｗｅｅｎｔｈｅｅｏｌｅｉｎｔｈｅｒｅａｌｗｏｒｌｄ１：０ｔｈｅｖｉｒｔｕａｌｓａｃｅ．Ｄｕｅｔｏ１：ｈｅｐｐｐｐｃｏｍｍｅｒｃｉａｌｖａｌｕｅｏｆｓｏｃｉａｌ打ｅｔｗｏｒｋｄａｔａｉｔｉｓｄ