《资讯数据中心交流》PPT课件

《《资讯数据中心交流》PPT课件》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、资讯数据中心目录需求分析数据中心规划与设计数据中心技术方案港澳资讯优势分析典型案例介绍需求分析—（重复采购、信息孤岛）资讯数据需求分析—为什么要建立数据中心？01数据的重复采购02系统开发面对多种数据接口03数据源管理复杂04数据孤立于各个系统之中05数据共享困难06系统中的数据替换成本高07数据没有积累和沉淀需求分析—数据中心是什么？数据源数据中心ETL采编系统ETL监控系统数据发布系统通用展示系统维护系统数据接口服务数据源数据源需求分析—数据中心建成示意图元数据管理采编系统知识管理平台CRM系统VIP服务终端网站服务营业部专栏短信服务数据中心客户经理平台营销服

2、务平台需求分析—建成数据中心受益点01统一了公司数据接口02不同级别信息用不同方式服务于不同级别客户所需的数据可以由数据中心统一提供03降低了系统对某一数据供应商的依赖度04打通了内部所有系统的数据流目录需求分析数据中心规划与设计数据中心技术方案港澳资讯优势分析典型案例介绍规划与设计01数据源02数据采集、清洗（ETL）03数据发布、维护、应用04数据展现与接口开发规划与设计—数据源（分类）序号分类原则分类说明01投资品种股票/基金相关投资品种的基本资料、交易报价、重要事项、财务业绩、投资分析等数据债券/权证利率/外汇期货/商品02投资群体机构发行、监管、中介服务

3、、投资等机构；公司高管、相关机构从业人员、管理人员、监管机构高层领导等个人03投资环境宏观环境宏观经济、国际经济数据中观环境行业经济、区域经济数据04数据结构结构化交易行情、财务报表、统计月报等数据非结构化财经新闻、研究报告、法律法规、公司公告等文本资料以及图片、视频等媒体资料05数据加工基础数据公开披露的各种金融资讯数据及宏观行业统计的不可衍生计算的基础信息衍生数据根据基础数据进行简单运算得到的衍生信息模型数据基础信息和衍生信息通过分析模型计算生成的信息06数据来源外购数据向不同的资讯供应商外购各金融资讯数据内部数据公司内部的研究报告、投资建议、分析模型数据等其

4、他数据其他需要入库的数据规划与设计—数据源（内容）序号内容说明01财经新闻财经、证券类动态信息02基础数据包括股票、债券、基金、权证及衍生品等基本资料03行情数据各证券品种及指数行情数据及金融工程所需的高频数据04宏观数据权威部门发布的各类宏观数据05行业数据包括各行业产量、指数、财务、价格数据等06研究报告公司自己的研究成果07交易数据公司交易用户的历史交易数据08专供数据为服务定制的各类信息产品、股票池及投资组合等09短信数据需要短信服务于客户的专用数据10衍生数据各类风控、资产评估等模型所需要的衍生数据规划与设计—数据源（关联）规划与设计—数据源（流向）外购

5、数据数据清洗

6、数据整合

7、数据校验原有内部数据其他入库数据资讯数据中心临时库

8、风险控制

9、知识管理

10、估值评价

11、其他应用

12、研究人员数据维护信息提取其他用户信息数据加工者信息数据生产者信息数据使用者J2EE/.Net信息数据提取者各类型应用数据库各类型服务产品数据库港澳资讯规划与设计—（采编系统）自有信息采集规划与设计—ETL（数据处理）结构化数据通常是指被记录信息的类型,格式等属性是固定的，比如：交易行情，各种财务报表等，数据中心通过ETL和专用系统来实现结构化数据的导入主要支持的数据源：各种数据库（oracle,db2,mssqlservermysql等所有主流数据库

13、）XBRL（可扩展商业报告语言）XML，DBF，EXCEL等结构文件Bloomberg数据接口，大智慧行情接口等WebService等各种服务接口非结构化数据是指被记录信息的数据长度和格式等是不固定的，比如：网站上新闻内容，WORD，PDF等文件内容。对于非结构化数据处理，数据中心提供了网站抓取识别系统等系统实现智能导入。对于没有办法自动识别的数据通过数据中心信息采集系统手动采集。可以自动识别的非结构化数据：邮件接收和分拣HTML，WORD，PDF等各种网站的抓取规划与设计—ETL（图形化开发界面）规划与设计—ETL（监控）规划与设计—数据发布数据发布系统是作为任

14、务调度系统的一个插件，实现数据中心到各种数据库的数据发布功能，支持局域网和internet。发布系统主要特点：发布配置简单，选择需要发布的内容和目标数据库系统就会自动发布数据过去。支持历史数据发布功能，以天为单位补历史数据。支持所有主流数据库。支持发布时过滤功能。支持数据库间字段自动匹配，也就是目标数据库结构可以不同，发布时自动匹配相同字段。支持发布数据到EXCEL和WORD。规划与设计—数据应用序号应用01其他自有和特有数据的ETL开发02个性化数据衍生计算03全文检索服务04资讯数据展示05后台维护目录需求分析数据中心规划与设计数据中心技术方案港澳资讯优势分析

15、典型案例介