大数据-宗露华为大数据产品及金融行业实践

《大数据-宗露华为大数据产品及金融行业实践》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、华为金融行业大数据实践分享大数据是华为ICT战略的重要支柱Source:Huaweicorporatepresentation全球8个研究所，保持1000+的研发投入；拥有社区Committer、IEEEFellow等世界级数据挖掘和人工智能专家；截止2016年12月，华为大数据取得专利190+，其中发明公布136件，发明授权54件。ProfessionalServiceBigDataAnalyticsPlatformDataCenterInfrastructureCoreNetworkIP+OpticalFBBEnterpriseNetworkMBBThings(

2、M2MModule)People(SmartDevice)EnterpriseAppsSDPBSS/OSS3rdPartnersContent&App3rdISVs华为大数据：IDC中国大数据MarkerScape领导者第一IDC观点：华为公司大数据的竞争优势在于：大数据作为公司重点战略，公司内部有持续发展的规划，网罗全球高端专家，持续进行高研发投入，为公司打造了持续创新的能力。华为聚焦大数据平台层，秉承开放、合作、共赢的理念，以技术合作和人才培养为支撑，携手合作伙伴打造大数据生态。截至2016年12月，华为FusionInsight大数据平台主要商业合作伙伴超过2

3、00家。当前行业数据处理规模最大的即公共安全、银行业以及运营商，这几个领域对于大数据平台的性能要求最高。华为在这三大领域积累了700多个案例，证明了产品的稳定性、可靠性以及安全性。华为同时也是活跃的开源社区贡献者。华为是OpenStack董事与白金会员，CompletedBlueprints贡献全球第一，综合贡献在中国厂商中排名第一，Hadoop社区贡献全球第三，Docker开源社区综合贡献排名全球第三。2016年华为创建了社区项目ApacheCarbonData，发布了实时反欺诈平台FarmerRTD。华为是大数据生态建设的倡导者和践行者Top2Top4Datab

4、ricksClouderaIntelHuaweiMeituanAppierAlpineDataHortonworksHuaweiClouderaNTTAltiscaleIntelYahoo2015年10月，华为贡献大数据挖掘隐私保护增强技术（PET），将PET技术应用于大数据领域，助力产业发展。2016年6月，华为将CarbonData贡献给社区，成为全球第一个由中国企业提出,被Apache社区接纳的开源组件。2015~2016年统计数据GartnerDMSA魔力四象限报告华为FusionInsight，云化、开放、融合的大数据平台数据集成PorterSqoop批量

5、采集大规模并行处理数据库ApolloDBFlume实时采集Oozie作业调度管理Kafka消息管理FtpOnHDFS文件传输管理平台Manager大数据分析关系型数据库服务:RDS运维管理配置管理故障管理性能管理安全管理……Hadoop生态发行版HD（HDFS、MapReduce、HBase、Hive、Solr、Spark、Storm、Flink、Elk、CarbonData等核心组件）数据洞察Miner（图分析引擎、机器学习、数据标签）大数据云服务数据智慧Farmer（实时决策引擎FarmerRTD）数据接入服务:DIS数据分析服务：MRS、DWS、Stream、

6、M-OLAP…人工智能服务：MLS、NLP…HD：全新数据格式Carbondata，同时满足多种业务需求多维分析LargeScansOLAPSequentialAccessRandomAccessSmallScans传统模式Carbondata模式高效率，高性能，存储灵活，兼容MPPDB：帮助企业构建高性能、PB级新数仓数据迁移SQL开发集群管理完备的工具链FusionInsightMPPDB64位Linux系列，通用X86架构（SUSELinux、Redhat）硬件+OS集群服务器-1集群服务器-nMPP大规模并行处理集群SCTP大规模集群通讯网络……DNDNDN

7、DNDNDNDNDNDNDNDNDNDNDNDNDNDNDNCore1Core1Core1Core1Core1Core1Core1Core1Core1完备的SQL能力，应用平滑迁移开放平台性能业界最佳弹性伸缩支持PB级数据处理Miner：一站式图形化大数据洞察平台FusionInsightMinerMinerBase数据探索并行化算法库(机器学习、图分析、时空数据分析)模型管理数据分析产品图分析引擎(Weaver)日志分析(DataCompass)建模分析标签管理全流程；多维度；高性能；开放Farmer：实时应用使能器，助力企业实时决策平滑微服务化；易运维；高可