欢迎来到天天文库
浏览记录
ID:35063785
大小:5.85 MB
页数:71页
时间:2019-03-17
《基于大数据技术的车辆监控系统的优化与实现》由会员上传分享,免费在线阅读,更多相关内容在学术论文-天天文库。
1、分类号:TP311.5单位代码;10183研究生学号;201353H143密级:公开4戀古林大学硕女学位论文专他学先()基于大数据技术的车辆监控系统的化化与实现OptimizationandImplementationofVehicleMonitoringSystemBasedonBigDataTechnology作者姓名;曾宪宇类别:工程硕±领域(方向;)软件工趕指导教师:李颖教授邓春燕讲师埼养单位?:软件学院2016年6月
2、未经本论文作者的书面授权,依法收存和保管本论文书面版本、电子版本的任何单位和个人,均不得对本论文的全部或部分内容进行任何形式的复制、、修改、发行、出租改编等有碍作者著作权的商业性使用(但纯学术性使用不在此限)。否则,应承担侵巧的法律责任。吉林大学博±(或硕±)学位论文原创性声明本人郑重声明:所呈交学位论文,是本人在指导教师的指导下,独立进行研究工作所取得的成果,本论文不包。除文中已经注明引用的内容外含任何其他个人或集体已经发表或撰写过的作品成果。对本文的研究做出重要贡献的个人和集体
3、,均己在文中yx明确方式标明。本人完全意识到本声明的法律结果由本人承担。学位论名;文作者签聲吗;2016日日期年月^基于大数据技术的车辆监控系统的优化与实现OptimizationandImplementationofVehicleMonitoringSystemBasedonBigDataTechnology作者姓名:曾宪宇领域(方向):软件工程指导教师:李颖教授邓春燕讲师类别:在职工程硕士答辩日期:2016年5月15日摘要摘要基于大数据技术的车辆监控系统的优化与实现随着互联网的飞速发展和“互联网+”热
4、潮的推动,传统行业逐渐向信息化方向靠拢,这已成为传统行业中的重要战略布局,使得互联网信息化在全球范围内的数据迅速增长,数据种类也越来越丰富。近年来随着人们生活水平的提高,汽车已成主要的交通工具,汽车的销量逐年上升,导致车辆所产生的数据也随之不断增长。目前的车辆监控系统中由车载终端上传的数据大部分以传统的关系型数据库模式存储,传统的关系型数据库在存储数据量到达一定规模后查询效率将会大幅度下降,对系统的整体性能产生巨大的影响,因此大数据量的问题已成为目前车辆监控系统中的主要性能瓶颈。本文将介绍几种大数据处理技术并加以运用,包
5、括Spark分布式计算框架,Hbase数据库,Kafka消息队列,Redis缓存服务器。充分利用这几项技术的优势,对目前的车辆监控系统进行优化,采用Kafka作为车载终端和监控平台的数据桥梁,车载终端服务采集车辆信息上传到Kafka,Spark从Kafka接收上传的数据进行并行处理和计算,计算过程中需要的配置信息从Redis中读取,最后将计算的结果中临时数据缓存到Redis中、离线数据存放在Hbase中,供监控平台使用;在线数据发送到Kafka中,供上级(政府)平台使用。通过采用以上技术对车辆监控系统优化后,系统的吞吐量
6、和性能有明显的提升,并且具备良好的扩展性可满足日益增长的数据需求,该优化方案对车辆监控系统大数据的存储和效率提升上有显著作用。关键词:车辆监控系统,Spark,Hbase,Kafka,RedisIAbstractAbstractOptimizationandImplementationofVehicleMonitoringSystemBasedonBigDataTechnologyWiththerapiddevelopmentofInternetand"Internet+"boom,graduallytotheinfor
7、matizationinthedirectionofthetraditionalindustry,ithasbecomeanimportantstrategiclayoutintraditionalindustries,sotheInternetinformationdataofrapidgrowthintheglobalscope,thedatatypeisbecomingmoreandmorerich.Inrecentyears,withtheimprovementoflivingstandards,carshave
8、becomethemainmeansoftransportation,carsalesincreasedyearbyyear,causedthevehicledataisincreasing.Thecurrentvehiclemonitoringsystembymostcarterminaltouploaddatat
此文档下载收益归作者所有