大数据量处理的解决方案.docx

《大数据量处理的解决方案.docx》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、解决海量数据处理-云智能数据处理架构StyleIntelligence敏捷商业智能平台作为敏捷商业智能的领导者，针对海量数据处理与海量数据实时分析的需求，于2009年率先推出了支持实时海量数据计算的云智能数据处理架构。云智能数据处理架构包括：内存数据库StyleIntelligence敏捷商业智能平台中内存数据库的访问性能提高到传统关系型数据库管理系统（RDBMS）的十倍甚至数十倍；而在内存的使用上，却是传统数据库的十分之一甚至更少。这一技术为支持海量数据处理，实时海量数据分析奠定了坚实的基础。高速分布式存储StyleInt

2、elligence敏捷商业智能平台中自主知识产权的分布式存储模块实现了海量数据的高速压缩、高速读写和高速传输，为支持海量数据处理，实时海量数据分析提供了优良的存储架构。高速分布式计算StyleIntelligence敏捷商业智能平台的云智能数据处理架构能够智能地将海量数据计算需求以最优化的方案分配给各数据处理分节点，而运行在各分节点的高效计算模块可以在毫秒级完成上千万条数据记录的扫描、统计、分析、预测等计算需求。以上这些技术在StyleIntelligence敏捷商业智能平台中融汇贯通，将StyleIntelligence云

3、智能数据处理架构与基于批处理（BatchJob）的分布式存储和分布式计算的平台区别开来，完美地满足了海量数据处理，海量数据分析的业务需求。到今天，StyleIntelligence云智能数据处理架构已经成功部署于上百家全球性机构，包括AT&T、美国国防部、世界卫生组织等著名机构。架在云上的商业智能-StyleIntelligence商业智能应用能不能架在云上？答案是能。几乎所有的软件，都能架在云上，主要看是哪朵云。如今云计算这个概念很广泛，虚拟化技术，分布式计算，网络存储，分布式服务，通通都是云计算。商业智能应用可以通过分布

4、式计算，利用整合低成本计算机来构建高可用、高扩展的、高性能的超级应用机器。以此高效响应商业智能应用中的实时海量数据分析。实现云智能的架构需要以下三个部分：·分布式数据存储框架：将数据仓库，数据库，封闭系统（SAP等）的数据分步存储到云中。·实时的分布式数据计算框架：将计算分解到云中，归并各网格计算结果，并返回结果。·分布式计算管理框架：配置管理，系统资源内部审核，系统资源优化等等。StyleIntelligence敏捷商业智能平台做实时数据分析多年，必然要在实时数据分析领域有所突破，我们利用云计算来保持产品的持续领先。从测试

5、数据来看，GB级数据，三五台PC就能实现很好的响应，响应时间是在零点几秒这个级别。TB级数据，需要多一些PC才能达到这种响应速度。StyleIntelligence敏捷商业智能平台被使用在SalesForce.com上搭建SaaS应用，直接用两台机器，就在性能上取得大幅提高。相比于数据仓库或者数据库访问，性能提升至少在十倍以上。