面向微博的社区发现研究

《面向微博的社区发现研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、万方数据面向微博的社区发现研究摘要随着在线社交网络的快速发展，微随己被公认为是继电视、邮件、报纸、广播等之后的一种新型的网络信息传播方式，兼具着媒体和社交网络的特征。随着微博这个新型媒体的兴起，越来越多的广告商在这个社交网络平台上看到了机会。虽然微博这个社交化网络对于用户来说仅仅是一个获取信息与知识，实现与好友互动，展现自我的平台，但是对于商家来说，一个有着那么多注册用户的平台，它就不仅仅是一个分享信息的平台了，商家可以利用社交平台对其产品和服务进行病毒营销、口碑营销。如今，不管是文本或是富媒体信息，在微博平台上均能快速的进行传递、互

2、通、互动，由此，越来越多的社交行为从线下转向线上，而这种从线下到线⋯卜的转变，不仅仅体现在线下的社交行为一h线下社区的产品宣传到线-

3、：社区的产品宣传的转变尤为明显。但是如何将线。卜社区的广告宣传无缝隙移植到线上社区，这是如今广告商越来越想解决的问题。虽然广告商呵以借助微博社交平台采用海投广告的策略，但这无疑会造成广告成本较高，而一tJ．会引起那些对广告不感冒的微博用户的反感，从而将这种反感情绪通过发布微博迅速传播到其它微博用户视线一lI，进而产品的知名度亦会随之降低。因为不同的广告而向不同的用户群体所属的虚拟社区，如果能挖掘出每个用

4、户所属的社区后，根据微博的局部聚类特性识别出领域广告对应的社区，就可提高广告投放的精准度。这样，广告商不仅可以有针对性I：l勺对相应虚拟社区的微博用户投放广告，而且可以获得更多投放用户，从而更能提高广告的转化率。本文首先对与社区发现相关的一些理论技术进行介绍，然后总结了目前几类较经典的社区发现算法，包括基于标签传播的社区发现、以层次为中心的社区发现、基于团渗透的社区发现、基于混合概率模型的社区发现，并分析了以上几类社区发现算法的适用场景及优缺点。在领会了以上儿类社区发现算法之后，本文针对微博这种相互性网络的独特性，提出了⋯种基于RDD

5、(ResilientDistributed万方数据Dataset)数据模型的Spark集群并行计算思想的多标签传播社区发现算法。本算法借鉴了Raghava等人提出的标签传播算法LPA的思想，解决了LPA标签传播算法社区发现不稳定及准确度彳≮高的两大缺陷。为了消除标签传播算法中不稳定的特性，在对自身社区标签进行更新时，若有多个可选社区标签时，不会任意地对某一社区标签进行挑选，而是利用⋯定规则，将符合这一规则的社区标签全部选择。而为了解决LPA算法准确率不高的缺点，本文引入了微1尊传播系数，因为微博传播系数能够识别出当削户节点关注某’1个

6、人时，该用户属于被关注用，j所在社区的隶属程度，不会平等地对待每一个被关注用，1所属社区。另外，本算法也借鉴了Gregory等人提出的COPRA算法，能够对具有重叠的社区结构进行发现，但与其思想也有本质的区别：(1)不会限制每个微博用户所从属的社区标签，因为微博用户的兴趣爱好是广泛的，而且是动态变化的；(2)首先根据用户所发微博内容挖掘出那些活跃微博用户所属社区，然后利用这些已被划分到相关社区的用户作为己标注社区的节点进行社区标签传播。最后，本文将基于RDD(ResilientDistributedDataset)数据模型的Spark

7、集群计算的消息传递机制的并行计算思想运用于本文提出的算法·fI，使得算法在处理大规模图计算问题方向成为’叮能。因此，本文所提出的算法不仅砷}ilk。。1,1’1。效的发现微博用户所属的重叠社区，而且能处理大规模的图计算0可题。关键词：微博，社交网络，社区发现，煎疆社区，标签传播万方数据THERESEARCHOFCOMMUNITYDETECTIONFORMICROBLOGABSTRACTWhenonlinesocialnetworksaredevelopingrapidly，MicroBloghasbeenrecognizedasamo

8、deofnewinformationnetworkpropagationaftertelevision，emails，newspapers，broadcastingandSOon．What’Smore，MicroBIogincludesthefeaturesofthemediaandsocialnetworks．WhenMicroblogisrisingquickly，themajorityofadvertisersdiscoverthisopportunityontbissocialnetworkingplatform．AIthou

9、ghMicroBlogsocialnetworkisanonlyshowplatformtoaccessinformationandknowledgeandtocommunicatewithfriendsforusers