数据集成研讨会资料之二.pdf

《数据集成研讨会资料之二.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、<在此处插入图片>用于BI和数据仓储的实时数据集成议题•为何用实时数据实现BI？<在此处插入图片>•用于实现实时BI的体系结构•实时数据集成要考虑的因素•数据移动•数据质量与监测•客户案例•总结2引子3引子不用BI可以做到吗？传统BI可以做到吗？什么因素最重要？4业务智能的发展模式转变战略BI运营BI管理和优化日常业务运营业务重点组织长期发展目标LOB经理、一线员工、运营系统主要用户管理人员、分析师一天之内时间范围数月或数年事件驱动、事件处理使用模型依赖查询/响应数据历史量度实时、低延迟历史数据信息来源：In

2、telligenceSolutionsInc.5为何用实时数据实现BI？实时=相关可操作性信息提高洞察以制定运营决策通过运营效率改善客户服务和节省成本提高盈利能力、客户忠诚度和竞争优势6实时运营BI实战网上促销优化联系人优化欺诈检测客户流失基于位置的服务供应链改善信息来源：IntelligenceSolutionsInc.网络研讨会：无处不在的运营BI。7实时与适时实时捕获、适时使用IT不应成为业务桎梏：投资于面向未来的解决方案考虑技术优势：节省成本、提高可靠性和性能8议题•为何用实时数据实现BI？<在此处插

3、入图片>•用于实现实时BI的体系结构•实时数据集成要考虑的因素•数据移动•数据质量与监测•客户案例•总结9用于实现实时BI的体系结构•单个源、运营报告•仅限于单个应用•便于将BI整合到事务处理中OLTP报告实例•整合多个源以生成报告•BI应用使用运营数据，运行在ODS上ODSOLTP•使用包含运营数据和历史数据的多个源•BI应用运行在ODS和DW上，以便将历史数据分析ODS与事务数据相结合EDWOLTP1010向ODS/DW加载数据的常用方法及其缺点自定义批处理SQL查询与数脚本据库触发器•非实时•接近实时•

4、需要批处理窗口•开销过高•管理成本高昂•存在干扰•恢复能力有限•部署和维护成本高昂•恢复能力非常有限11议题•为何用实时数据实现BI？<在此处插入图片>•用于实现实时BI的体系结构•实时数据集成要考虑的因素•数据移动•数据质量与监测•客户案例•总结12成功实施运营BI要考虑的因素•避免手工脚本•脚本消耗源系统资源较大，因此可能影响运营服务水平•脚本可管理性差•数据实时性•实时数据才更具操作意义•确保数据质量•提高实时报告准确性13OracleGoldenGate是什么？OracleGoldenGate提供异构

5、环境间事务数据的实时、低影响的捕获、路由、转换和交付。主要独特优势：性能非侵入、低影响、亚秒级延迟开放的、模块化的体系结构—支持异构源和目标灵活、可扩展可靠维护事务完整性—轻松面对中断和故障14OracleGoldenGate用例满足实时数据需求的企业级解决方案零停机迁移和升级新的数据库/操作系统/硬件/应用active-active双活完全主动•降低成本分布式数据库基于日志的实时•降低风险更改数据捕获查询分流报告Oracle数据库•实现卓越的运营GoldenGateETLODSEDWETL异构源系统实时BI

6、EDW数据分发全球数据中心SOA/EDA15OracleGoldenGate工作原理capture：通过读取事务日志，在事务发生时捕获（也可筛选）提交的事务。队列：准备数据，使数据排入队列以备路由。datapump：分发数据以便路由到目标。路由：压缩、加密数据以便路由到目标。delivery：保证事务数据完整，根据需要转换数据。队列队列capturedatapumpdeliveryLAN/WANInternetTCP/IP源Oracle和目标Oracle和非Oracle数据库非Oracle数据库16Oracl

7、eGoldenGate工作原理capture：通过读取事务日志，在事务发生时捕获（也可筛选）提交的事务。队列：准备数据，使数据排入队列以备路由。datapump：分发数据以便路由到目标。路由：压缩、加密数据以便路由到目标。delivery：保证事务数据完整，根据需要转换数据。队列队列capturedatapumpdeliveryLAN/WANInternetTCP/IP源Oracle和目标Oracle和非Oracle数据库双向非Oracle数据库17OracleGoldenGate11g支持的数据库和操作系统

8、数据库操作系统和平台OracleGoldenGate捕获：OracleWindows2000、2003、XPDB2LinuxMicrosoftSQLServerSunSolarisSybaseASETeradataHPNonStopEnscribeHP-UXSQL/MPHPTRU64SQL/MXHPOpenVMSOracleGoldenGate交付：IBMAIX上述各项，以及：IB