基于云计算的个性化推荐系统关键技术研究

《基于云计算的个性化推荐系统关键技术研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、中图分类号：TP393论文编号：HBLG2016-393UDC：密级：公开硕士学位论文基于云计算的个性化推荐系统关键技术研究作者姓名：代晨旭学科名称：计算机技术研究方向：计算机网络与通信学习单位：华北理工大学学制:2.5年提交日期:2015年11月25日申请学位类别：工程硕士导师姓名：纪占林副教授单位：华北理工大学信息工程学院李硕高工单位：唐山广播电视台论文评阅人：匿名单位：匿名单位：论文答辩日期：2016年2月26日答辩委员会主席：郭建波教授关键词：推荐系统；Hadoop；Mahout；协同过滤；SlopeOne算法唐山华北理工大学2016年3月Th

2、eResearchonKeyTechnologiesofCloud-BasedPersonalizedRecommendationSystemDissertationSubmittedtoNorthChinaUniversityofScienceandTechnologyinpartialfulfillmentoftherequirementforthedegreeofMasterofEngineeringbyDaiChenxu(ComputerTechnology)Ph.DJiZhanlinSupervisor:LiShuoMarch,2016独创性

3、说明本人郑重声明：所呈交的论文是我个人在导师指导下进行的研究工作及取得的研究成果。尽我所知，除了文中特别加以标注和致谢的地方外，论文中不包含其他人已经发表或撰写的研究成果，也不包含为获得华北理工大学以外其他教育机构的学位或证书所使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中做了明确的说明并表示了谢意。论文作者签名：日期：2016年3月7日关于论文使用授权的说明本人完全了解华北理工大学有关保留、使用学位论文的规定，即：已获学位的研究生必须按学校规定提交学位论文，学校有权保留、送交论文的复印件，允许论文被查阅和借阅；学校可以将学位论文的

4、全部或部分内容采用影印、缩印或编入有关数据库进行公开、检索和交流。作者和导师同意论文公开及网上交流的时间：□√自授予学位之日起□自年月日起作者签名：导师签名：签字日期：2016年3月7日签字日期：2016年3月7日摘要摘要Internet技术的迅速发展使互联网规模不断扩大，信息数量呈爆炸式增长。面对海量的信息如果没有合适的工具，人们很难在其中找到自己所需要的信息资源。推荐系统对用户的历史数据进行数据挖掘和分析，得到用户偏好，以此向他们推荐感兴趣的物品或信息资源，从而满足用户的个性化需求。随着数据处理量的增大，可扩展性问题成为制约推荐系统发展的瓶颈。将推

5、荐系统与Hadoop分布式云计算平台相结合能够很好地解决这一问题。首先，从HDFS分布式系统和MapReduce编程思想两方面入手，深入研究了Hadoop的运行机制以及编程原理。在此基础上，结合推荐系统的通用模型，设计了一个基于Hadoop的推荐系统架构，详细介绍了系统中每个模块的设计思想。其次，对近年来流行的协同过滤推荐算法和SlopeOne算法进行深入分析，利用Mahout机器学习算法库进行Hadoop平台上的协同过滤推荐算法实现，设计了基于Hadoop的SlopeOne算法的MapReduce并行化处理方案。再次，在传统SlopeOne算法的基础

6、上引入协同过滤思想，提出改进的SlopeOne算法。将目标用户的K个近邻用户的余弦相似度作为计算项目间评分差值的权重，并在Hadoop平台上实现了改进算法的MapReduce并行化处理，提升了改进算法的数据处理能力。然后，在Hadoop集群上利用经典的Movielens数据集对改进算法的性能进行比较。分析实验结果发现，改进算法的准确度比传统SlopeOne算法以及用户评分数量加权的SlopeOne算法有明显提高，证明了改进算法的有效性和先进性。最后，利用MovieLens数据集上的信息数据，实现了两种协同过滤算法以及改进SlopeOne算法，并对推荐结

7、果进行展示。图38幅；表10个；参48篇。关键词：推荐系统；Hadoop；Mahout；协同过滤；SlopeOne算法分类号：TP393-I-河北联合大学硕士学位论文AbstractTherapiddevelopmentofInternettechnologymakesthescaleofInternetever-increasing,theamountofinformationisexplosivegrowth.Facedwithmassiveinformation,it’shardtofindinterestedinformationresourc

8、eswithoutsuitabletool.Recommendationsystemmines