sem广告数据分析系统的设计与实现

《sem广告数据分析系统的设计与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、密级：公开学校代码：ＨＷ０４如交辦｜｜ＢＥＩＪＩＮＧＪＩＡＯＴＯＮＧＵＮＩＶＥＲＳＩＴＹ硕ｄｒ专业学位论文－Ｖ一ＳＥＭ广告画分析系统的设计与实ｉ见ｍｍ作者姓名陈盛力王程领域软件工程硕±专业学位论文ＳＥＭ广告数据分析系统的设计与实现ＴｈｅＤｅｓｉｎａｎｄＩｍｌｅｍｅｎｔａｔｉｏｎｏｆＳＥＭＡｄｖｉｅｒｔｉｓｅｍｅｎｔＤａｔａｇｐＡｎａｌｓｉｓＳｓｔｅｍｙｙ作者；陈盛力导师：陈旭东副教授北京交通大学２０１６年６月北京交通大学硕±专业学

2、位论文学位论文版权使用授权书本学位论文作者完全了解北京交通大学有关保留、使用学位论文的规定。特授权北京交通大学可レッ将学位论文的全部或部分内容编入有关数据库进行检索，、、提供阅览服务，并采用影印缩印或扫描等复制手段保存汇编Ｗ供査阅和借阅。同意学校向国家有关部口或机构送交论文的复印件和磁盘。学校可为存在馆际合作关系的兄弟髙校用户提供文献传递服务和交换服务。（保密的学位论文在解密后适用本授权说明）Ａｈ学位论文作者签名：巧盛々导师签名：佑ｉ心ｋ签字日期：乂年月／日签字日期月Ｕ

3、日ｉｉＶ，＞学校代巧：０００４：１巧级公巧北京交通大学硕±专业学位论文ＳＥＭ广告数据分析系统的设计与实现ＴｈｅＤｅｓｉｇｎａｎｄＩｍｐｌｅｍｅｎｔａｔｉｏｎｏｆＳＥＭＡＤＤａｔａＡｎａｌｙｓｉｓＳｙｓｔｅｍ作者姓名：陈盛力学号；Ｈ１２６０７６导师姓名；陈旭东职称：副教授工程硕±专业领域：软件工程学位级别；硕±北京交通大学２０１６年６月ｉｉｉ北京交通大学硕±专业学位论文致谢本文是在我导师陈旭东的悉私指导下完成的，老师严

4、谨认真的态度给我的学习、和工作树立了良好的榜样。在此对老师论文的指导给Ｗ衷必的感谢。在研巧生期间陈旭东老师不管是生活上还是学习上都给予了很大的关必，在学习方向和实习上给了很多指导，在此对两年来老师的教诲表示感谢。在企业实习期间薄立兴、尹茸、卢忠浩、张新字部给了我很大的帮助，本系统是在企业实习时参与的项目，他们在实际工作中给我肘也的指导，在此对他们表示衷屯、的感谢。同时在论文撰写期间我的室友毕巧一、刘天祥给了我精神上的支持们，我起一、在学校自习室、学子活动中也、客室巧写论文，起完成了论文

5、的定稿、修改。室友两年也起度过了许多愉快的日子，在此对他们的陪伴与帮助表示感谢。段康康在论文格式排版上给了我帮助在此表示感谢。同时我也要感谢我的家人，他们是我动力的来巧，支持我学习，关也我生活，谢谢我的家人。ｉｖｉｍ摘要ＳＥＭ（ＳｅａｒｃｈＥｎｇｉｎｅＭａｒｋｅｔｉｎｇ，搜索引擎营销）是在用户使用搜索引擎进一１１１。行搜索时，将希望传递的信息显示给目标用户的种推广方式推广方在搜索引擎平台对不同的关键词进行投放，使推广的页面有更高频率和概率症示到搜索用户面前，使

6、用户发现并通过点击进入相应的页面。京东商城每天都有上亿的流量访问，商城获取流里的方式多种多样，其中ＳＥＭ是其极其重要的流量来源。京东商城有大里商品分类和具体商品页面信息，不同商晶分类、不同的商品、不同的促销都有不同的推广的需求。国内有百度、搜狗、３６０搜索、神马捜索凡家主要搜索引擎厂商，运营人员每天要维护不同捜索引擎平台上推广账户的ＳＥＭ投放信息，并需要分析各个账户的投放效果，Ｗ便更新关键词、。的投放比例，投放价格，业务逻辑复杂、数据维度多数据里庞大ＳＥＭ。论文依据京东商城的实际需求，

7、设计和实现了广告数据分析系统该系统维护京东商城在各家搜索引擎上的所有ＳＥＭ投放账号，自动获取和存一储各个账号在不同平台的投放效果数据，分析并产出投放报表，同时提供统的有效提高投放效果和投放效率的投放操作。系统主要功能包括数据报表和实时投放。系统实现技术包括ｈａｄｏｏｐ，ｈｉｖｅ，ｐｉｇ，ｏｏｚｉｅ，ｄｒｕｉｄ，ｅｌａｓｔｉｃｓｅ扣ｃｈ，ｎｏｄｅ．ｊｓ，油ｅｌｌ，ｐｙｔｈｏｎ等，完成数据的拉取、聚合、査询、修改和媒体端交互等功能。系统设计将系统分为ｆｅｔｃｈｅｒ，ｄｒｕｉｄ

8、ｄａｔａｅｎｅｒａｔｏｒｏｌａｄａｔａｏａｄｅｒ，山，＿ｊｇ，ｐ＿Ｊｓａｖｅｅｓｕｅｒｅｓｕｐｌｏａｄ几个主要模块。ｆｅｔｃｈｅｒ模块主要负责从各家搜索引擎，ｑｙ＿＿，的提供的差异化的ＡＰ一Ｉ，Ｗ统的方式，定时调度获取并经格式处理存储到ｈｉｖｅｄｍｄａ中；ｉｄｔａｅｎｅｒａｔｏｒ模块负责将拉取的数据与商城后台的数据进行各个维