欢迎来到天天文库
浏览记录
ID:50430348
大小:4.16 MB
页数:75页
时间:2020-03-06
《基于云架构的交通流量数据分析平台.pdf》由会员上传分享,免费在线阅读,更多相关内容在学术论文-天天文库。
1、.'r、■.今,;.■Nr::t-.=10293密:\单位代码级考巫《僅硕女給戈论文题目;基于云架构的交通流貴数据分析平台学号1212043102姓名李成露导师臨丹伟专业学位类别工程硕d■:类型全日制专业(领域)软件工程— ̄已V’论文提交日期■2015化3月3日;:;;>■-■.:■'■:、-.'’?、-?...卢,'■气—:-).V';—....-.,八户--■,A
2、.??1.?-一;古-fyt■南京邮电大学学位论文原创性声明本人声明所呈交的学位论文是我个人在导师指导下进行的研究工作及取得的研究成果。注和致谢的地方外,论文中不包含其他人已经发表或撰写过尽我所知tiU示,除了文中特别加含为获得南京邮电大学或其它教育机构的学位或证书而使用过的材料。的研究成果,也不包与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明确的说明并表示了谢意。一切相关的法律责任。本人学位论文及涉及相关资料若有不实,愿意承担研究生签名;陽咖0把戸斬今V南京邮电大学学位论文使
3、用授权声明件本人授权南京邮电大学可可臥保留并向国家有关部口或机构送交论文的复印和电子文档可;允许论文被查阅和借阅;1^^将学位论文的全部或部分内容编入有关数据库进行检索;心心采用影印、缩印或扫描等复制手段保存、汇编本学位论文。本文电子文档的内容和紙质论文的内容相一致。论文的公布(包括刊登)授权南京邮电大学研巧生院办理。涉密学位论文在解密后适用本授权书。研究牛镶导师签处日期:切斧ATrafficFlowDataAnalysisPlatformBasedontheCloudArchitectureThesisSubmittedto
4、NanjingUniversityofPostsandTelecommunicationsfortheDegreeofMasterofEngineeringByChengluLiSupervisor:Prof.DanweiChenMarch2015摘要城市交通的快速发展,交通流量数据每天以PB级或者更高的数量级增加,如何高效地存储这些数据并从中挖掘出业务价值成为本文研究的关键,Hadoop作为大数据的处理工具脱颖而出,成为大数据时代处理海量数据的主流平台之一。本文使用大数据平台分析交通数据,做了以下几个方面的工作:1.研究交通流量数据,根据业务需求设计了
5、三个应用:“指定车子是否被套牌”、“指定车子是否被跟踪”以及“两点之间的最优路径”;2.结合Hadoop2.2.0版本的分布式平台,设计上述应用的算法,并通过Map/Reduce实现出来,包括存储分布和计算分布;3.针对实时性强的应用采用Twitter公司的Storm流式处理平台,设计应用的算法,并用java设计topology;4.搭建集群和实验平台,进行实验分析,结果表明基于Hadoop以及Storm的交通流量数据分析平台具有高效的存储和计算能力,验证了该平台的可行性;关键词:大数据,Hadoop,Storm,分布式计算,MapReduceIAbst
6、ractThequickdevelopmentofthecitytrafficmakesthetrafficflowdataincreaseinPBorhighleveleveryday.howtostorethesedataefficientlyanddigforthebusinessvalueisthekeyofthispaper.Asaplatformforbigdataprocessing.Hadoopshowsitselfandbecomesoneofthemostpopularmainstreamplatformofbigdataproces
7、singinthisera.Thethesisusesbigdataprocessingplatformtoresearchtrafficflowdataanddothefollowingwork:1.Studythetrafficflowdataanddesignthreeapplicationsaccordingtothedemandofbusiness:ifonespecificcar’slicenseplateiscoverd.ifonespecificcarisfollowedandtheoptimalroutebetweentwopoints
8、;2.Designedapplicationalgorithmscombingw
此文档下载收益归作者所有