资源描述：
《基于云计算的移动互联网大数据用户行为分析引擎设计_陶.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。
1、电信科学2013年第3期专题：大数据技术与应用基于云计算的移动互联网大数据用户行为分析引擎设计*陶彩霞，谢晓军，陈康，郭利荣，刘春（中国电信股份有限公司广东研究院广州510630）摘要：随着移动互联网的迅速发展，运营商面临的竞争日益激烈，流量经营势在必行，基于用户行为分析的精确营销是重要手段。但在大数据时代，随着移动互联网业务和用户数量的快速增长，传统的架构难以适应海量数据挖掘的要求。本文提出了一种基于云计算的移动互联网大数据用户行为分析引擎解决方案，包括系统总体架构设计、大数据入库与预处理组件、大数据用户行为分析模型等关键模块的设计，最后分析了系统测试效果
2、。关键词：云计算；大数据；移动互联网；用户行为分析；MapReduce；应用平台；DPIdoi:10.3969/j.issn.1000-0801.2013.03.006DesignofMobileInternetBigDataUserBehaviorAnalysisEngineBasedonCloudComputingTaoCaixia,XieXiaojun,ChenKang,GuoLirong,LiuChun(GuangdongResearchInstituteofChinaTelecomCo.,Ltd.,Guangzhou510630,China)Abs
3、tract:Alongwiththerapiddevelopmentofmobileinternet,telecomoperatorsfaceanincreasinglycompetition.Sotrafficoperationsareimperativefortelecomoperators,andprecisemarketingbasedonuserbehavioranalysisisanimportantmeans.Butintheeraofbigdata,withtherapidgrowthofthemobileinternetserviceand
4、thenumberofusers,thetraditionalarchitectureisdifficulttoadapttotherequirementsofmassdatamining.Adesignofmobileinternetbigdatauserbehavioranalysisenginebasedoncloudcomputingwasprovided，includingtheoverallsystemarchitecturedesignsolution,thebigdataloadingcomponentsandthebigdatauserbe
5、havioranalysismodelcomponents.Additionally,thetestresultsofsystemperformancewereanalyzed.Keywords:cloudcomputing,bigdata,mobileinternet,userbehavioranalysis,MapReduce,applicationplatform,DPI营商却出现数据业务收入增速放缓的困境，面临被管道化1引言的威胁。为应对移动互联网带来的挑战，中国电信提出了从从2010年开始，国内移动互联网进入快速发展阶段，话务量经营转向流量经营的战
6、略目标，从传统的注重用户领先的电信运营商开始布局移动互联网，同时，互联网公规模转变为注重流量发展。运营商拥有庞大的用户，同时司全面介入，终端厂商也基于应用商店模式快速加入移动具有对终端及用户上网通道的掌控能力，使得在用户行为互联网领域。根据艾瑞咨询发布的数据，全球移动互联网分析方面具有很好的数据基础，深入分析用户流量行为特用户数正呈爆发式增长，2014年全球移动互联网用户数征和规律，发现用户潜在流量使用需求，是提升流量规模有望达到14亿。然而在数据流量快速增长的同时，电信运和价值、提高流量经营水平的有效手段。*国家“863”计划基金资助项目（No.2012A
7、A12A203）27专题：大数据技术与应用然而随着移动互联网的迅速发展，用户行为分析面临数据采集、分析到服务提供、营销执行的全过程。着新的挑战：一是移动互联网新业务、新产品“短、平、快”的系统通过FTP服务器获取数据，在接口层采用分布式特征，要求运营商支持快速变化的营销活动；二是随着移动计算与批量处理相结合的方式，将大数据存入Hbase数据互联网业务及终端、传感器技术发展带来的数据量的急剧库中，支持海量数据和非结构化数据的存储，数据入库之膨胀，需要分析和处理的数据规模从GB级迈向TB级甚至后利用Hive进行整合层和汇总层的ETL处理，再基于PB级。传统的数据
8、分析架构已经不能适应这种海量数据处MapReduce
