大数据技术创新与应用

《大数据技术创新与应用》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、大数据技术创新和应用•中国电信云计算研究中心赵慧玲1内容提纲大数据行业背景概述中国电信大数据技术创新中国电信大数据行业应用实践2大数据产业最新概况产业步入复苏期，互联网+是国内新机遇2015年7月，国务院发布《关于运用大数据加强复苏期对市场主体服务和监管的若干意见》2015年7月，国务院《关于积极推进“互联网+”5行动的指导意见》2015年9月，国务院发布《促进大数据发展的行萌芽期过热期幻灭期市动纲要》场政府高度重视行业案例遍地开花国家推动2014年4月，世界经济论坛以“大数据的回报各种研究机构成立内部数据是主要来源从

2、概念到持4与风险”主题发布了《全球信息技术报告》续资本市场沸腾并购潮风起云涌实用2014年5月，美国白宫发布2014年全球“大数据”白皮书《大数据：抓住机遇、守护价值》升2014年11月，中国首个“工业4.0”联盟成立温，32013年4月，阿里收购友盟，参股新浪微博2013年5月，阿里入股高德地图未来3年价2013年6月，沃尔玛收购大数据公司Inkiru值2013年6月，“棱镜门”事件不断22012年3月，美国启动“大数据研究和发展计划”，标志大数据上升为国家战略显2012年11月，数据科学与信息产业大会在北京召开，标

3、志数据科学登现上产业舞台，学术、产业和资本市场达成共识2011年麦肯锡总结大数据现象并发布报告1《大数据的下一个前沿：创新、竞争和生产力》，点燃大数据热潮20112012201320142015（大数据元年）3大数据产业特性数据与技术双驱动大数据行业应用大数据应用技术SAAS【地理BI，广告优化】【Geo、推荐、可视化】数据能力开放算法和能力开放PAAS【数据银行、数据交易】【机器学习、预测分析】数据基础设施技术基础设施IAAS【企业数据、物联网数据】【Hadoop、Spark、NoSql】数据和技术双驱动的大数据产业4灯塔大数据产业定位

4、整合多源数据，打造能力平台，创新行业应用中国电信定位于通过广泛整合多源数据、精准打造能力平台、深入创新行业应用，与业内合作伙伴一起，共同营造大数据生态圈创新行业应用打造能力平台整合多源数据大数据产业地图2016（FirstMark）灯塔大数据自我定位5大数据技术热点对内数据融合对外数据开放提供超大容量的存储空间混合数据存储混合数据存储支持对海量数据的智能检索和分析兼容各种类型的大数据应用混合数据库架构混合数据库架构提供混合的数据存储模型，支持文件、对象、键值、块等多种访问接口实现电信数据内的多种用户借助从电信数据中挖掘异构数据关联

5、融合关系型数据库、列数据库、内存数据库、图数据库等多种数据库，ID关联，实现多场景、多屏出的外部ID，实现电信形成混合数据库架构幕信息打通，实现更全面和数据与外部数据的打通，将多源异构数据进行关联和融合，挖掘数据之间的相关性，精准的用户满足多种场景下的数据处理描述需求从而打破电信数据开放能够为数据分析奠定坚实的基础，最大限度地发挥数据价值的壁垒大数据技术热点行业知识库行业知识库深度标签深度标签面向多个行业，深挖行业知识详情，构建行业知识库，形成完整的行业知识通过针对大数据场景的数据挖掘，深入分析用户行为，打造多层次、多体系角度的

6、用户深度标签，使得大数据应用更加精准，大数据业务能够更加，有效推动数据应用与价值落地贴近用户，更好地满足用户的需求大数据采集与存储解决方案•大数据的采集与存储解决方案包含：电信网络大数据的采集、互联网公开数据的采集以及企业自有数据的接入，并将三种来源的数据进行融合和存储，构建IAAS层，供PAAS层调用。•面向电信管道数据、互联网公开数据和企业自有数据等多种数据类型，分别构建数据采集能力，并定义统一的数据采集接口与存储接口，解决了多源异构数据的采集与存储问题。•目前平台已采集并汇聚电信数据1000多亿条、外部数据4亿条。8大数据应用：数据

7、API•大数据的应用全部对接标准化的数据API，包括群体画像API、精准标签API、泛义征信API以及地理人口统计API。数据API群体画像API精准标签API泛义征信API地理人口统计APIPAAS9灯塔大数据多源数据整合灯塔大数据目前已广泛整合中国电信内部云公司与省公司数据、抓取互联网公开数据和接入第三方数据，有效数据总体量近1000亿•固网及移动管道数据（DPI）•用户注册信息（CRM）用户行为数据（条）电信数据全脱敏•流量及话单数据（ODS）总量1000亿+•移动位置数据（信令）•电商•地产•视频行业字典规模（网页数）互联网数据•

8、金融抓取•触媒总量4亿+•社交•汽车•教育•法院•工商API接口数量（个）第三方数据•银行接入•航空总量300+•人力•公安10灯塔大数据能力平台打造灯塔大数据通过长期技术积累，打造能力平台，