电子商务环境下面向海量数据的个性化推荐系统的设计与实现

《电子商务环境下面向海量数据的个性化推荐系统的设计与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、万方数据DesignandRealizationofPersonalizedRecommendationSystemOrientedtoMassDatainE．．commerceEnvironmentAThesisSubmittedtoSoutheastUniversityFortheAcademicDegreeofMasterofEngineeringBYXunShiSupervisedbyJunzhouLuoSchoolofComputerScienceandEngineeringSoutheastUniversityJune2014万方数据东南大学

2、学位论文独创性声明本人声明所呈交的学位论文是我个人在导师指导下进行的研究工作及取得的研究成果。尽我所知，除了文中特别加以标注和致谢的地方外，论文中不包含其他人已经发表或撰写过的研究成果，也不包含为获得东南大学或其它教育机构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均己在论文中作了明确的说明并表示了谢意。研究生签名：东南大学学位论文使用授权声明日期：兰：[丝￡：2东南大学、中国科学技术信息研究所、国家图书馆有权保留本人所送交学位论文的复印件和电子文档，可以采用影印、缩印或其他复制手段保存论文。本人电子文档的内容和纸质论文的内容相一

3、致。除在保密期内的保密论文外，允许论文被查阅和借阅，可以公布(包括刊登)论文的全部或部分内容。论文的公布(包括刊登)授权东南大学研究生院办理。研究生签名：导：垫!竺受：旦万方数据摘要随着互联网的迅速发展，电子商务已经成功融入进人们的日常生活中，成为必不可少的一个部分。个性化推荐技术作为一种重要的信息过滤手段，目前被广泛用于电子商务的各项应用中。然而随着电子商务应用的用户和商品数量逐渐增多，数据规模急遽扩大，己有的推荐系统在性能和执行效率方面己逐渐落后，存在实时性差，稀疏性问题严重，计算效率低等缺点。本文针对原有推荐技术在稀疏性、可扩展性、实时性等方面的问

4、题，设计并实现了一个高效的个性化推荐系统。在推荐系统的离线部分，本文提出了一种全新的用户兴趣度模型——-爪性描述树，更准确地描述了用户对商品的兴趣度。在此模型基础上，提出了基于最小哈希聚集的电子商务个性化推荐算法PSLH，利用哈希聚集的方式求取用户之问的相似度以简化计算复杂度，并将其部署到云计算环境下，采用MapReduce技术实现算法并行化，有效提高算法的计算效率和可扩展性，缓解了稀疏性问题。除此之外，本文还提出了基于商品属性的关联规则挖掘算法ARM，利用关联规则挖掘技术发现商品的内在相关性，从而形成推荐，实现了推荐结果的多样性。在推荐系统的在线部分，

5、本文利用web日志记录用户的行为，并根据最近行为形成实时推荐，有效缓解实时性问题。本文所设计开发的个性化推荐系统被部署在东南大学云计算中心，并使用中国制造网的真实数据对系统进行测试，在此基础上本文设计了Portal电子商务平台对推荐系统产生的结果进行演示。测试结果表明，相对于传统的推荐算法，本文开发的个性化推荐系统中采用的算法具有良好的推荐性能和执行效率，完全符合拥有海量数据的电子商务环境对个性化推荐技术的需求。关键词：电子商务：个性化推荐；最小哈希聚集；云计算；关联规则挖掘万方数据AbstractWiththerapiddevelopmentofInt

6、emet，E—commercehasbeenintegratedintopeople’Sdailylifeandbecomesanessentialpart．Asallimportantmethodininformationfiltering，personalizedrecommendationtechnologyiswidelyusedinvariesofE．commerceapplications．However，withtheincreaseofthenumbersofusersandproductsinE—commerce，thedatascal

7、eexpandsrapidly,theexistingrecommendationsystemshavebeenbackwardinperformanceandexecutionefficiency．Therearedisadvantagessuchaspoorreal—timeperformance，serioussparsityproblem，lowexecutionefficiencyandSOon．Accordingtotheproblemsoforiginalrecommendationtechnologyinthepartofsparsity

8、,expandabilityandreal—time，Anefficientpe