基于音乐网站的过滤式网络爬虫的研究正文大学学位论文.doc

《基于音乐网站的过滤式网络爬虫的研究正文大学学位论文.doc》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、本科毕业论文基于音乐网站的过滤式网络爬虫的研究43BACHELOR'SDEGREETHESISOFWUHANUNIVERSITYResearchofthewebcrawlerbasedonmusicwebsiteByJune201543郑重声明本人呈交的学位论文，是在导师的指导下，独立进行研究工作所取得的成果，所有数据、图片资料真实可靠。尽我所知，除文中已经注明引用的内容外，本学位论文的研究成果不包含他人享有著作权的内容。对本论文所涉及的研究工作做出贡献的其他个人和集体，均已在文中以明确的方式标明。本学位论文的知识产权归属于培养单位。本人签名：日期：2015.5.154

2、3摘要随着社会的进步与电脑的普及，网络逐渐取代了传统的信息平台，成为人们迅速获得和发布资讯的重要工具。在这一背景下，在线数字音乐服务因为其方便、快捷的特点受到大众的普遍欢迎。目前虽然数字音乐服务提供商众多，却同质化现象严重，跟不上部分用户的需求。互联网上的歌曲难以计数，然而用户想要找到自己喜欢的歌曲往往要花费大量的精力去搜索歌曲和浏览各种歌单。本文力求通过开发一个音乐网站，通过数据爬取与算法分析，使得人们找到自己喜欢的歌曲不再困难。该音乐网站采用B/S结构进行开发。使用python+tornado+mysql+redis搭建该网站系统。在软件工程相关规范的约束下，结合实

3、际情况对系统进行开发。本文首先介绍了目前市面上的音乐电台存在的问题，并且介绍开发环境及开发者运用到的关键技术。之后对网站系统的一些关键技术进行研究和实现。关键词：音乐电台；网络电台；B/S结构43ABSTRACTAsoursocietydevelops,computerisbecomingmoreandmoreimportantinourdailylife,andInternetbecomesanimportantmediumforpeopletogettheinformationquickly.Inthiscontext,becauseonlinedigitalmus

4、icserviceisconvenientandfast,itiswelcomedbythegeneralpublic.Althoughtherearemanydigitalmusicserviceproviders,buttheyfailedtomeetthedemandofsomeoftheusers.ThesongsontheInternetaredifficulttocount,however,thattheuserneedstospendalotofenergytosearchforsongsandbrowseallkindsofplaylistinorder

5、tofindsongstheyenjoy.Thisarticleseekstodevelopamusicwebsite,sothatuserscaneasilyfindtheirfavoritesongs.ThemusicwebsiteusesB/Sstructuretodevelop.Usepython+tornado+mysql+redistobuildthewebsitesystem.Thewholesystemdevelopmentprocessfollowedthesoftwareengineeringrelatedspecificationandtheact

6、ualsituation.Thispaperfirstintroducestheexistingproblemsofthemusicwebsites,andthenintroducesthedevelopmentenvironmentandthekeytechnologywhichtheauthoruses.Thenwestudyandrealizesomekeytechnologiesofthewebsitesystem.Keywords:musicradio；Webcrawler;B/Sstructure43目录1绪论91.1论文的选题的目的和意义91.2国内外关于

7、该论题的研究现状和发展趋势91.3论文主攻方向101.4论文的主要内容111.5论文的研究方法和技术路线112技术支持122.1python编程技术122.2json可拓展标记语言122.3tornado122.4MySQL132.5Redis142.6Nginx142.7前端技术152.8MVC设计模式162.9网络爬虫162.9.1网络爬虫的分类162.9.2网络爬虫常见搜索策略173音乐网站概要设计193.1概述193.2需求分析193.2.1面向人群193.2.1功能性需求193.2.1.1需求功能划分193.2.1.2功能描述2