利用 Oracle 信息模型驾驭大数据 王宇德

《利用 Oracle 信息模型驾驭大数据 王宇德》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、利用Oracle信息模型驾驭大数据王宇德DerekWang博士企业架构师derek.wang@oracle.comOracle免责声明以下内容旨在概述产品的总体发展方向。该内容仅供参考，不可纳入任何合同。本演示不承诺提供任何材料、代码或功能，也不应将其作为购买决策的依据。Oracle有权自行决定任何产品的特性或功能的开发、发布和时间安排。结构化…非结构化LevelExampleStructuredRelationaldatabaseSemi-structuredXMLdatafilesQuasi-structuredTextdocumentsUnstructur

2、edImagesandvideoNonStructuredAnewclassofproblemshasemergedwhichdemandsanabilitytoacceptandmanagedatawithoutadvancedknowledgeofitsstructureorformat.大数据在IT行业的发展趋势企业需求：实时分析分析:IT的下一个前沿议题•认识大数据•采用EA方法驾驭大数据•架构功能•案例研究认识大数据当前设计点：数据量、多样性、高速度每天1亿次每天100万次每年10亿名访问者图片上传网络交易索赔分析电子商务保险每天100亿次1000万个

3、仪表每天2000万次设备同步每小时上传监视消费者公用事业医疗卫生大数据特性•巨大的数据量Volume•集中储存/集中计算已经无法处理巨大的数据量•多结构化数据VarietySOCIAL•文本/图片/视频/文档等VOLUMEBLOG•增长速度很快VelocitySMARTMETER•海量数据的及时有效分析VARIETY•用户基数庞大/设备数量众多/实时海量/数据指数级别增长•价值密度低Value10110010100100100VELOCITY1101010101011100101010100100101•单条数据并无太多价值，但庞大的数据量蕴含巨大财富VALUE

4、各行各业的用例航空与国防汽车公用事业通信消费品性能传感器智能量表呼叫、内容舆情、地点、应用程序设备教育与科研旅游与运输金融服务医疗保健高科技建模每小时20TB欺诈个人传感器制造执行系统安全性监视工业制造保险生命科学媒体/娱乐石油与天然气质量个性化保险临床试验访问者勘探基因组电子商务公共部门零售网站行为计量经济学消费者行为面临的挑战：数据量、高速度、多样性大数据为什么重要?BeforeBigDataAfterBigData决策基于交易型数据决策基于所有的数据•视频和图像•文档•社交数据•机器生成数据业务挑战驾驭大数据当一切数据尽在掌握，您会有怎样不同的作为？真正的

5、业务挑战识别模式—预测行为•“建模有效性”•常识还是科学？–认知心理学–行为心理学–计量经济学、统计学–决策科学大数据预测美国医疗保健制造全球个人定位数据欧洲公共部门管理美国零售产值每年增长装配成本降低服务提供商产值每年增长净利润增长超过收入增加3000亿–50%1000亿2500亿60+%美元美元欧元信息来源：*McKinseyGlobalInstitute：“BigData–Thenextfrontierforinnovation,competitionandproductivity”（2011年5月）识别大数据平衡点总数据量处理自由并发作业1000100P

6、B10PB大数据通用数据1PB分析处理100TBSQL数据更新模式模式复杂性事务性仅追加结构化非结构化100TB批处理批处理1PB传统10PB100PBRDBMS交互式单位作业响应速度100个表数据量表联接复杂性大数据，不仅仅只是Hadoop和NoSQLOracleCEP类OLAP+ETLStorm+OracleStorage狭广NoSQL+义义随机存取+StorageBigDataConnector结构化数据的大数据处理OracleExadata,结构化大数据分布式处理的典范大数据：挑战转化为机遇业务价值→深度分析→高敏捷性大数据→高度可伸缩性平台→实时将来→

7、高度多样性挑战→大数据量大数据→高速度现状大数据能力创新的方向部分数据‘大’数据结构化与非结构化，海量数据报表/KPI分析/挖掘从获取到存储、分析、挖掘、展现延时实时/近实时实时集成、即时分析、企业级封闭开放数据与能力的开放，新的商业模式20大数据将作为2012年的下一个“必备”能力占有一席之地。IDC（2011年12月）Oracle面向大数据的集成解决方案Cloudera与Hadoop分析应用程序OracleOracleNoSQL数据大数据数据库仓库分析连接器数据库中的交互式发现企业应用获取组织分析决策Oracle大数据平台OracleOracleOracle

8、Oracle大数据机大数