乐蜂网电商大数据平台架构设计及应用马方旭

《乐蜂网电商大数据平台架构设计及应用马方旭》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、全球软件案例研究峰会电商大数据平台架构设计及应用TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR电商大数据全球软件案例研究峰会AliBaBa电商大数据互联网零售数据BaiDuTecent实体店TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR我们的数据源拆解全球软件案例研究峰会前台系统网站主站手机APPWAPHTML5人工客服分销网站ERP订单仓储配送TMS商家POPOMSWMS后台系统财务FMS工单CC采购PMS大数据平台分析DW挖掘DM数据DPTOP100CASESTUDIES

2、办公OAwww.top100summit.comOFTHEYEAR全球软件案例研究峰会数据在电商数据对于电商的支撑主要体现在业务运营方面，可以分为三个层次。直接展现帮助引导参与运营TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR数据在电商之直接展现全球软件案例研究峰会TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR数据在电商之帮助引导全球软件案例研究峰会1.所见及所得，快速的数据获取2.在建实时平台，实时指导运营TOP100CASESTUDIESwww.top100summ

3、it.comOFTHEYEAR数据在电商之参与运营全球软件案例研究峰会采用集群技术，高效计算，实时推荐TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR数据收集全球软件案例研究峰会JSPC网站/WAP/HTML5前端埋点移动端接口后端业务系统日志TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR大数据带给我们的挑战全球软件案例研究峰会大数据给我们带来了一些挑战，主要包括以下几个方面数据量特别大数据的种类繁多业务变化快数据处理的时效性较高TOP100CASESTUDIESwww

4、.top100summit.comOFTHEYEAR数据建模全球软件案例研究峰会高效计算反映业务模型高度汇总灵活适配TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR我们的架构设计全球软件案例研究峰会基于大数据对我们的挑战，我们建立了一套高效可扩展的大数据平台架构，这个架构主要分为四层。第一是原始数据层；第二是计算汇总层；第三是应用层；第四是应用系统层；TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR全球软件案例研究峰会系统层展现数据价值的系统(APPSys)应用层直观提供

5、业务需求数据(APP)计算汇总层数据建模的核心(DW)原始数据层原始数据存储（ODS）TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR我们的大数据架构全球软件案例研究峰会数据适配（角色）数据应用数据落地数据加工数据存储数据采集TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR数据源我们的数据产品-推荐(列举几个主要的)全球软件案例研究峰会商品维度，包含看了又看、看了又买、买了又买、同时购买、收藏并购买、收藏并收藏、最佳组合(一起购买会更好)等；热销维度，包含分类热销、品牌热销、

6、礼包热销、礼包品牌热销等；用户浏览及购买维度，包含浏览品牌并购买、浏览分类并购买、搜索且最终购买等；TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR推荐系统架构全球软件案例研究峰会httprequest商品详情clienthttpgateway库存通用服务价格Json热销商品信息补全/。。。过滤/排名等操作推荐接口服务推荐结果MysqlRecommender1R2………….Rn单商品多商品推荐列表RedisMysql线下模型结果ClusterClusterHDFSMapReduce定时刷新推荐引擎线下预测结果HbaseC

7、lusterStorm实时计算Kafka消息中间件流量TOP100CASESTUDIESwww.top100summit.comOFTHEYEAR全球软件案例研究峰会ThankYouTOP100Summit案例研究峰会官网：www.top100summit.comTOP100CASESTUDIESwww.top100summit.comOFTHEYEAR