大数据技术在精准营销中的应用

《大数据技术在精准营销中的应用》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、Business&Operation业务与运营大数据技术在精准营销中的应用王小鹏北京东方国信科技股份有限公司北京100102摘　要简要介绍主流的大数据技术架构和大数据挖掘技术；阐述大数据技术在精准营销与维系系统建设中的应用，包括技术实现方式以及大数据能力的体现，最后展望大数据应用的前景。关键词大数据应用；大数据技术；精准营销；大数据挖掘；大数据能力一个服务器系统。其基本特征是由多个SMP服务器(每引言个SMP服务器称为一个节点)通过节点互联网络连接而大数据时代，数据已经渗透到当今每一个行业和成，每个节点只访问自己的本地资源(内存、存储等)，业务职能领域，成为

2、重要的生产因素。对于海量数据的节点之间的信息交互是通过节点互联网络实现的。目挖掘和运用，预示着新一波生产率增长和消费者盈余浪前的技术可实现512个节点互联。MPP数据库有以下特潮的到来。回顾近两年对大数据的探索历程，某基础运点。1)一般存储为结构化数据，有明显的星型或雪花型营商一方面顺应大势，牢牢把握大数据技术快速发展的结构，适用于大数据分析的应用；2)每个服务器都有自机遇，另一方面应势而动，充分释放前期IT集中化、一己独立的存储、内存和CPU，允许动态地增加或删除体化的红利，坚定推进数据集中。先后经历了数据集中节点；3)数据分区划分到不同的物理节点上，通过

3、分布采集的积淀、初试大数据Hadoop平台、传统数据库与式查询优化来提高系统整体性能；4)主要用在数据仓库Hadoop混搭架构的大数据平台创建，以及目前朝开放和大规模的分析处理应用中。式大数据服务平台迈进四个阶段。1.2Hadoop大数据处理平台精准化营销与维系系统，依托大数据精准定位支撑Hadoop是参考Google相关技术而发展起来的开源端到端多维度维系体系，构建在大数据平台之上，面向分布式存储和计算系统。其核心部分是HDFS(Hadoop客户、面向服务、面向管理，深化数据分析、数据挖掘DistributedFileSystem，分布式文件系统)和M/R

4、(Map/能力，洞察客户、透视企业，是将大数据转化为实际生Reduce)。HDFS是一个高度容错性的存储系统，M/R[1]产力的重要云化应用之一。则是一个计算框架。一个M/R作业通常会把输入的数据集切分为若干独立的数据块，由Map任务以完全并行的1大数据技术架构方式处理。框架会对Map的输出先进行排序，然后把结果输入给Reduce任务，作业的输入和输出数据都会被1.1MPP数据库存储在HDFS中，整个框架负责任务的调度和监控以及MPP(MassivelyParallelProcessing，大规模并行[2]失败任务的重新执行。处理系统)由多个SMP(Symm

5、etricMultiProcessing，对称多处理系统)服务器通过一定的节点互联网络进行连1.3ETL技术接，协同工作，完成相同的任务，从用户的角度看它是ETL是指将数据从源端经过抽取(Extract)、转换21业务与运营Business&Operation(Transform)、加载(Load)至目的端的过程，该部分在可能即将离网”。数据挖掘和分析过程中为最基础的一部分。一个良好2.5大数据处理技术的ETL系统应该有以下几个功能。1)消除数据错误并纠大数据处理技术按目前分类，可分为大数据查询与正缺失数据；2)对于数据可信度的评估提供文档化衡数据分析、数据

6、库技术、流与复杂事件处理、分布式文量；3)获取相互作用的数据流程来保护数据；4)整合多[4]件系统等。个源数据；5)将数据进行结构化供最终用户使用。3精准营销与维系系统的技术实现2大数据挖掘核心技术精准营销与维系系统的大数据平台，既要支撑对内2.1语义引擎的数据分析应用(包括面向管理层的企业管理和经营分语义引擎即为一种能够从非结构化数据中提取有效析，面向前端的业务开发、运营与推广分析，面向后端信息的一种工具。相对于结构化数据而言，不方便用数的网络运营与优化分析)，又要支撑对外的数据开放与据库二维逻辑表来表现的数据即称为非结构化数据，包数据经营服务，包括数据产

7、品化。括所有格式的办公文档、文本、图片、XML、HTML、3.1系统架构各类报表、图像和音频/视频信息等等。某基础运营商的大数据系统架构如图1所示。主2.2数据挖掘算法要包括大数据uCloudD“三大体系、四大平台”的总数据挖掘算法是一个不断验证不断匹配的过程，需体规划以及全网、宽带明细数据、企业管理域核心数要数据分析人员与业务人员不断地沟通和交流，使采集据、移动互联网流量日志、全网手机终端数据等。的数据更加符合实际营销情况。多数情况下，数据挖掘精准化营销与维系系统是构建在大数据平台之上，技术与在线联机处理分析(OLAP)方法相伴使用，也可基于数据平台的数据

8、支撑能力，依托传统B域高价值密以单独使用，选择正确的