基于hadoop的并行svm算法研究及在mooc平台中的应用

《基于hadoop的并行svm算法研究及在mooc平台中的应用》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、硕士学位论文题目:基于Hadoop的并行SVM算法研究及在Mooc平台中的应用研究生琚泽龙专业计算机技术指导教师韩建平教授完成日期2016年03月杭州电子科技大学学位论文原创性声明和使用授权说明原创性声明本人郑垂声明；所呈交的学位论文，是本人在导师的指导Ｋ，独立进巧研巧工作所取得的成果，。除文中已经注明引用的内容外本论文不含任何其他个人或集体己经发表或撰写过的作品或成果。对本文的研究做出重要贡献的个人巧集体，均已在文中ｔＵ明确方式标明。一。申请学位论文与资料巧有不实之处，本人承担切相关责任论文作者签名：Ｕ期；＞乂年月日攀表／＾／学位论文使用授权说明本

2、人完全了解杭州电子科技大学关于保留和使巧学位论文的规定，即；研究牛在校攻读学位期问论文作的知识产权单位属抗州电子科技大学，。本人保化毕业离校后发衷论文或使用论文工作成果时署名单位仍然为杭州电子科技大学。学校有化保留送交论文的复印件，允许合阅和借阅论文，可允许采用影印、缩巧或其；学校可公布论文的全部或部分内容它复制千段保存论文。（保密论义在解密后遵守此规定）：论文作巧签名；口期＞／年０曰／＾／／指甘教师籍知Ｕ細月日心＾，，斗游杭州电子科技大学硕士学位论文基于Hadoop的并行SVM算法研究及在Mooc平台中的应用研究生：琚泽龙指导教师：韩建平教授2016年0

3、3月DissertationSubmittedtoHangzhouDianziUniversityfortheDegreeofMasterParallelSVMAlgorithmBasedonHadoopanditsapplicationinMoocplatformCandidate:JvZelongSupervisor:Prof.HanJianpingMarch,2016杭州电子科技大学硕士学位论文摘要在教育全球化的进程中，慕课诞生了。慕课平台因其学习者众多、免费、开放等诸多特性，正在教育领域掀起一场变革。然而由于诸多因素，最终能通过慕课考试，获取证书的人数在整体学习者中占比很小，为了

4、促进慕课平台的发展，提高学习者证书获取率是当务之急。因此在海量教育大数据中，对学习者进行分类，过程性地监控学习者能否获取证书，而后对他们提供定制服务是有效提高慕课证书获取率的有效方法。在分类算法中，支持向量机因其较少过度拟合、特征向量维数灾难不明显等优势被广泛应用。传统的SVM算法因时间复杂度高，训练时间长等因素，并不适合处理大规模数据集。为了解决这些不足之处，将SVM算法并行化来处理大规模数据集，是一种有效的解决方法。论文的主要内容包括：(1)简单描述了本文研究的相关背景与实际意义，查阅国内外研究相关的文献，并对其进行分析与总结，为本文提出改进的基于Hadoop的并行SVM算法提供重要

5、的科学参考与理论支持。(2)对支持向量机相关理论进行系统介绍，包括支持向量机的定义及其数学模型，然后介绍了SVM在二分类情况下的典型应用，最后利用二进制粒子群算法和遗传算法，对SVM的核函数参数和惩罚因子进行寻优，提高分类准确率。(3)在层叠支持向量机的理论基础之上，对基于Hadoop的并行SVM算法进行了设计与实现，并针对其存在的不足之处，提出了两点改进建议，并将其应用于处理大规模数据集，大幅度地提高了SVM的训练速度。(4)总结本文所做工作和科研中存在的不足之处，并对未来并行支持向量机的发展方向进行展望。关键字：支持向量机、Hadoop、慕课、二进制粒子群、遗传算法I杭州电子科技大学

6、硕士学位论文ABSTRACTIntheprocessofglobalizationofeducation,theMuclasswasborn.Muclassplatformforitsmanylearners,free,open,andmanyotherfeatures,issetoffarevolutionineducation.However,duetomanyfactors,thenumberoffinalexamsthroughtheMuclass,toobtainacertificateinasmallproportionoftheoveralllearner,Muclassp

7、latformtopromotethedevelopment,improvelearnerrateisaprioritytoobtainthecertificate.Thereforelargedatainthemasseducation,learnersclassify,processmonitoringlearnerscanobtainacertificate,andthentoprovidethemwithcustomized