欢迎来到天天文库
浏览记录
ID:62381041
大小:4.60 MB
页数:47页
时间:2021-05-01
《大数据行业用户案例.pptx》由会员上传分享,免费在线阅读,更多相关内容在教育资源-天天文库。
1、大数据行业用户案例HPEVerticaReal-timeAnalyticsPlatform专为大数据分析构建的关系数据库和非结构化分析引擎,分析100%的数据大数据实时分析平台高扩展高扩展列式计算实时聚合高级分析概念模型语义理解X86大规模并行处理架构(MPP)自动优化高速并行装载实时分析查询SQLODBC/JDBC/ADO.NETSQLODBC/JDBC/ADO.NET50x–1000x性能提升TBs~10PBs在线扩展节约90%的存储空间开放、简单易用结构化非结构化ConnectorsRESTful简单、高效、可扩展、开放的关系数
2、据库和非结构化分析引擎大数据分析平台架构)ODBCJDBCADO.NET安装管理监控优化备份恢复标准SQL解析,列式计算优化器内存存储自定义存储管理控制台列式计算执行引擎列式存储抽象层HDFSCLI本地文件系统物理存储层负载均衡和失败转移接口层负载管理实时聚合MPP架构数据库引擎New原生高级分析算法自定义分析处理算法SDK:C++、Java、R非结构化引擎RESTfulNewVertica专注于大数据分析,尤其是实时分析数据量高低OLTP系统作业类型单行数据实时性高低批量混合型场景传统数据仓库大数据分析大数据交易以网络为中心的电信业
3、务模式Telco1G…AMPS
4、nodata2G…GSM
5、nodata2.5+G…GPRS&EDGE
6、56kb/s3G…UMTS
7、237kb/s3.5+G…HDPA/HSPA
8、14mb/s4G…LTE
9、100mb/s每年几十亿甚至上百亿规模的网络投资基站设备网络设备电信架构演变Vertica电信行业典型方案BSS经营分析(BASS)详单(CDR)分析流量经营分析精准营销分析历史库与报表合作伙伴与电子渠道分析用户分类与收益分析……OSS信令分析网络错误与性能优化网络分析网络综合分析综合监控分析网络容量管理客户体验管理漫游分析……MSSE
10、RP数据仓库财务报表系统集中数据分析……创新业务增值业务分析平台大数据分析平台互联网分析用户行为分析用户位置分析点击流分析……超快分析速度、无限的扩展能力;SQL标准和开放性实时分析和聚合、无限的扩展能力;SQL标准和开放性超快分析速度;SQL标准和开放性开放性和与Hadoop/R的整合能力;超快分析速度、无限的扩展能力;非结构化分析数据量大分析处理能力要求高数据量巨大实时性要求高分析性能要求高数据量巨大分析处理能力要求高分析算法要求丰富业务域挑战的优势HP最具竞争力!很强竞争力!较强竞争力!典型场景:信令监测、共享和分析业务信令采集
11、和实时信令共享,对上层业务数据从多维度关联分析和挖掘,支撑数据业务精确营销和新数据产品服务。面临的挑战数据量100sTB~PB:从网络和DPI设备上采集的海量日志和日益丰富的应用数据,传统数据仓库难以满足存储和处理的要求分钟级准实时性:以社交新媒体和游戏为重点的应用,要求快速抓取社会热点,传统分析工具无法满足准时分析挖掘的要求Vertica解决方案带来的好处无限的扩展能力快速、持续的数据装载,实时分析和聚合SQL标准和开放性准实时分析,大数据变现典型案例:山西移动信令检测分析60节点HPBL460cG7刀片(VCFlex10)D220
12、0sb存储存储(12*1TB7200RPMSATA)TMR数据入库超过200MB/s包括GB,IUPS,GN,DPI等原始表入库周期为分钟级别汇总表入库周期为15分钟级别保存2个月,总量超过500TB多种粒度的汇总5分钟、小时、天Vertica准实时分析,前所未有典型场景:网络性能分析和优化业务采集网络设备日志和路测优化无线网络运行状态和服务质量,提升用户体验。面临的挑战数据量100sTB:从大量的网络设备采集的海量日志,传统数据仓库难以满足存储和处理的要求分钟级准实时性:快速发现网络质量问题,尽可能避免用户投诉Vertica解决方案
13、带来的好处无限的扩展能力快速、持续的数据装载,实时分析和聚合历史和相似场景分析预测潜在问题,有效避免设备过多配置的浪费准实时分析,提升网络服务质量典型案例:四川电信无线网络优化CDTCM、FM、PMIMSI-终端映射表Rx/Tx/FFER/SINR,位置CDT服务器OMMServer电信终端分析系统FTP普通终端采集数据工参电信资源管理系统数据采集NDS服务器数据预处理:话单分析容量分析,关联分析,预测数据分析电信网优云处理云:解析汇总存储云:话单数据,汇总指标数据应用呈现FTP处理云:Hadoop集群完成数据解析汇总存储云:HPVe
14、rtica集群完成大数据存储6个节点集群,数据量超过30T主表单表超过20TB,分钟级准实时入库典型场景:经营分析业务利用业务支撑、网络、服务和财务等系统产生的大量基础数据实现经营情况的分析和监控,供经营决策依据,以实现
此文档下载收益归作者所有