ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐

ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐

ID:8219193

大小:1.55 MB

页数:24页

时间:2018-03-10

ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐_第1页
ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐_第2页
ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐_第3页
ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐_第4页
ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐_第5页
资源描述:

《ArchSummit北京-《如何快速打造探索分析和深度分析的大数据平台》-王桐》由会员上传分享,免费在线阅读,更多相关内容在行业资料-天天文库

1、ArchSummit全球架构师峰会北京站2015打造一站式大数据分析平台王桐永洪科技数据创造未来已成真理没有数据化运营的企业,等于在黑暗森林中裸奔不可预测不明原因销量、收入、用户行不知现状利润下滑、增长停滞、为,没有准确的预测,无法获知业务状况、用户流失,不能探究依靠经验来进行备货、发展规律、用户画像真实原因,面对问题促销、人员扩张。粗等,在一片漆黑中凭无法有效解决,且未放经营,损耗太大。感觉前行。来再发生时依然如此。"IFYOUCANNOTMEASUREIT,YOUCANNOTIMPROVEIT."-LORDKELVIN少数派v

2、s全民化www.yonghongtech.com微信公众号:敏捷商业智能数据要打通到企业的每一个个体www.yonghongtech.com微信公众号:敏捷商业智能当前用户掌握数据技能的现状www.yonghongtech.com微信公众号:敏捷商业智能IT瓶颈化IT部门忙得要死,业务部门急得要死www.yonghongtech.com微信公众号:敏捷商业智能工具碎片化www.yonghongtech.com微信公众号:敏捷商业智能不能很好地处理大数据Forrester在报告中指出,有80%的用户拒绝使用企业的数据分析平台,因为无

3、法形成数据化运营的闭环www.yonghongtech.com微信公众号:敏捷商业智能现实:投入很大,期望很高但大数据的价值产出和预期并不匹配www.yonghongtech.com微信公众号:敏捷商业智能如何让数据真正促进业务?www.yonghongtech.com微信公众号:敏捷商业智能一站式大数据分析平台是未来企业的标配www.yonghongtech.com微信公众号:敏捷商业智能自服务数据准备探索式分析一站式大数据分析平台深度分析企业级管控www.yonghongtech.com微信公众号:敏捷商业智能Demo:一站式

4、大数据分析平台带来了什么样的体验www.yonghongtech.com微信公众号:敏捷商业智能要做到这一点需要什么样的数据处理引擎www.yonghongtech.com微信公众号:敏捷商业智能MPP(MassivelyParallelProcessing,大规模并行处理系统)数据集市JDBC接口借鉴Hadoop体系架构和增量流计算理念,采用内存计算、ETL管理备份管理库内计算、分布式通讯、列监控工具数据集市(单点或集群)认证授权多路、复用、异步的通讯层存储分布式文件系统等技术数据加载/卸载SQL优化库内计算内存计算分布式计算开

5、发实现的一个具备分布式并行实时处理、复杂查询优列列列列数据包数据包数据包数据包列化、复杂分析支持的大数据存数据包数据包数据包数据包储计算处理数据库系统。数据包数据包数据包数据包列存储DSM(decompositionstoragemodel)•大幅压缩数据•降低磁盘I/O•降低内存和cpu开销例如:计算1天中某支股票的平均价格SELECTAVG(price)FROMtable1WHEREID=‘AAPL’ANDdate=‘5/06/09’不仅仅是列存储,存储也为查询优化库内计算库找寻出最优化的计算方案,继而把所有开销较大的、昂贵的

6、计算都移动到数据存储的地方直接计算。这一技术大大减少了数据移动,降低了通讯负担,保证了高性能数据分析。内存计算得益于列存储技术和并行计算技术,大大压缩数据,并同时利用多个节点的计算能力和内存容量。通过内存计算,CPU直接从内存而非磁盘上读取数据并对数据进行计算。内存计算是实现大数据分析的关键应用技术。分布式计算MapReduce架构是一个通用处理并行计算的架构。利用多节点的并行计算提高计算效率。分布式通讯利用可复用的TCP/IP连接,多路,异步的信息传输等技术使得,中间计算结果在集群中稳定且高效地传输,是整个集群能否达到实时计算的

7、关键。一站式大数据分析平台打造人人都是业务专家的强大智慧企业www.yonghongtech.com微信公众号:敏捷商业智能永洪一站式大数据分析平台领军者300多家合作伙伴,1000多家客户,20000多个付费用户转发朋友圈,获取干货大数据技术白皮书永洪科技助力智慧企业成就未来

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。