欢迎来到天天文库
浏览记录
ID:5290657
大小:8.55 MB
页数:28页
时间:2017-12-07
《智慧交通大数据平台及应用》由会员上传分享,免费在线阅读,更多相关内容在行业资料-天天文库。
1、智慧交通大数据平台及应用ADDYOURPOWERPOINTTITLEHERE目录1大数据团队概况及建设方案2智慧交通大数据平台3智慧交通大数据应用2017大数据部的组织架构BigDataDepartment技术总监产品团队(3)开发团队(4)平台团队(4)数据团队(4)QA团队(2)强大的技术架构团队共19人2017BigDataDepartment技术总监1人专业数据挖掘分析师4人大数据可视化工程师1人需求分析师3人博士学历2人总工程师1人研究生学历8人高级软件工程师5人架构师1人业务经理1人QA管理1人智慧交通大数据中心建设方案(1+
2、N战略)第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT一期建设的内容2智慧交通大数据平台智慧交通大数据平台建设的目的和意义人人都能进行大数据分析大数据学习门槛高sparkmahoutJAVAJDBC开源大数据平台的开发难度高例如,黑屏命令行操作维护方式,增加了运维开发人员的工作难度、操作量,降低的工具的友好性。开源大数据平台运维成本高大数据集群数量众多的服务器不便于整体的部署与管理。1.资源监控2.组件部署3.资源分配4.辅助工具…第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT2智慧交通大数据平台智慧交通大数
3、据平台的功能特性第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT功能特性——各种异构数据的全方位汇集我们的产品第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT功能特性--拖拽式、图形化大数据分析环境,降低门槛和使用难度第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT•功能特性——便于维护自动部署参数配置优化•操作系统、LDP平台自动化•图形化界面操作,配置过程部署功能简单、易操作;•添加、批量移除,触发•Hadoop基础组件(Hadoop-hadoop、hbase等服务的一core、Hiv
4、e、HBase)配置系列处理参数1000+;服务器状态监控任务监控•CPU、内存、网络、磁盘运•清晰的看到主机上运行了那行状态些任务,任务的运行状态,•超过阀值报警是正常运行还是有故障•各个任务运行的内存、CPU第四届中国数据分析师行业峰会的使用情况CHINADATAANALYSTSUMMIT•功能特性——安全可靠安全授权•LDP平台可以控制数据访问,并对已通过验证的用户提供数据访问特权。•LDP平台支持细粒度的Hadoop数据和元数据访问控制;在服务器、数据库、表和视图范围提供细粒度访问控制了不同特权级别的访问控制,包括查找、插入等;允许管理员使用视图限制对
5、行或列的访问,支持字段级别的访问控制;基于角色的管理•LDP平台通过基于角色的授权简化了管理,可以将访问同一数据集的不同特权级别授予多个组。多租户管理•LDP平台允许为委派给不同管理员的不同数据集设置权限。机器级别的安全•对可信任的客户端提供认证,确保他们可以执行作业的相关操作。防止用户恶意冒充client提交任认证第四届中国数据分析师行业峰会务。即使伪装成用户入侵到一个HDFS或者MapReduce集群上,也无法读取HDFS上的数据。CHINADATAANALYSTSUMMIT3智慧交通大数据应用综合稽查BI展示视频结构化第四届中国数据分析师行业峰会CHIN
6、ADATAANALYSTSUMMIT基于大数据平台的综合稽查产品概况针对当前高速公路的逃费问题,提出了一套基于大数据分析的高速公路防逃费稽查方案,本系统方案利用当前高速公路视频监控系统的可视化视频和图片信息结合通行信息,运用大数据存储和分析的手段,从海量历史数据中提取出疑似逃费车辆和黑名单的车牌、抓拍图片、通行视频和通行路径等证据信息,形成逃费证据链信息,该证据链信息可有效用于高速公路路政执法、公安执法,为打击高速公路偷逃费、嫌疑车综合稽查辆定位提供了完善的稽查手段和证据信息。主要功能嫌疑车辆确认、黑名单管理、车辆特征管理、动态超时管理、数据稽查审核管理、证据
7、链管理、车票及通行券路径查询。第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT综合稽查系统架构第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT异车倒卡处理流程第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT黄冀GC9035百泉庄双向入土桥站内环出黄冀GC9582潞苑北街站双向入双横双向出应缴:125+145实缴:20+10逃费:240第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMIT同车倒卡处理流程第四届中国数据分析师行业峰会CHINADATAANALYSTSUMMI
8、T黄冀GB87922016-8-49:
此文档下载收益归作者所有