多数据源电子商务网数据监控系统的策划和设计

《多数据源电子商务网数据监控系统的策划和设计》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、多数据源电子商务网数据监控系统的策划和设计-->1.1问题的提出与背景概述近几年，电子商务网站蓬勃发展，如淘宝，凡客诚品，京东商城等，规模都己经很大了，国内网民也渐渐习惯于在网上购物，更使得电子商务得到了空前大发展。电子商务的发展己大大地冲击了传统的商品零售模式。电子商务是一个复杂的生态系统。一个健全的电子商务网站包含多个子系统，如前端销售系统，仓储系统，物流系统，配送系统，采购系统，销售排期系统，财务结算系统，市场营销系统，供应商管理系统，数据统计系统等等。且各个子系统所采用的技术手段不尽相同。且由于电子商务也是近几年才开始

2、迅速发展，大部分电子商务企业也非常的年青，这就使得电子商务内的各个子系统有很多并非电子商务企业自己开发，有很多子系统都是直接购买的市场上成熟的产品，如曼哈顿仓储系统，用友的ERP系统等。导致各个子系统的开发语言，运行环境也不尽相同。如前端销售系统一般为自己开发的，采用PHP语言。而ERP系统，仓储系统，配送系统等大多直接购买市场上成熟的产品，这些系统大部分采用JAVA语言。各个子系统采用的数据库管理系统也不尽相同，可能是MysqlSQLServerOracle等。且由于电子商务网站用户量大，流量高，后端一般采用分布式服务器对外

3、提供服务，如Mysql会进行读写分离，由若干台分布式的Mysql服务器提供数据服务。这就使得监控这如此大量的不同环境的数据成为了一个具大的挑战。且这些数据具备很大的价值。这些数据代表了电子商务网站的销售情况，配送情况，采购情况等。电子商务系统的任何部分出现问题，都将使电子商务网站不稳定。所以必须实时地监控这些数据，从而达到保证电子商务系统正常运转的目的。当线上系统出现问题时，很多情况下，程序员需要通过查看线上的真实数据才能定位问题的所在，而不是技术部门的测试系统数据。且系统的很多问题只有在线上环境才会重现。但线上的生产环境的权

4、限，尤其是查看线上生产环境数据的权限不可以赋予普通程序员，因为这些数据都极其敏感，属于电子商务公司内的高级机密。且如果把这些权限赋予普通程序员的话，如果由于程序员的误操作，如写update语句时忘了加上公司是国内排名前10的电子商务企业，主营女性化妆品和奢侈品销售。拥有巨大的用户量，每日的销售额上千万。在北京，上海和成都都拥有自己的仓储配送系统，公司员工近两千人。笔者有幸在JM公司技术架构部门实习并负责数据监控系统的研究开发工作。通过分析公司各个不同子系统的功能和特点，并调研公司各个职能部门的主要工作，及整个公司各子部门的运营

5、状况。对于各个部门提出的需求进行归纳，整理和抽象。为满足各个监控需求和线上数据库操作需求。通过分析研究，参考业内技术发展状况，设计出本数据监控系统。很好地解决了各种不同的监控需求和数据查询更改需求。并采用Python语言，对本系统进行编程实现。最后投入实际使用。并在使用过程中进行升级和完善。从使用过程来看，本系统很好地解决了电子商务数据监控的需求，使电子商务网站得到了更稳定的运行，且更好地提高了公司各个职能部门的工作效率。具备很大的现实意义。1.2项目的研究意义与目标由于电子商务网站的真正蓬勃发展也只是近几年的事情，国内各大电

6、子商务企业的成立时间都不是很长，其各方而的系统都不是很健全，为了抓住市场机遇，公司内部各子系统也都比较参差不齐，有的系统为公司自有人员开发，而有的系统则采用直接购买市场上的成熟产品。摘要5-6ABSTRACT6第1章引言9-131.1问题的提出与背景概述9-101.2项目的研..............10-111.3论文的主要工作11-121.4论文组织结构12-13第2章技术路线13-232.1Python简介13-152.2Django框架15-162.3Linux的crontab16-202.3.1语法介绍17-182

7、.3.2使用方法18-202.4Nginx服..............20-23第3章数据监控系统的需求分析23-303.1系统介绍233.2电子商务系统的组成23-243.3电子商务系统..............24-253.4电子商务企业的组织结构25-263.5电子商务的运营流程263.6电子商务的..............26-273.7基于LDAP的单点登录273.8电子商务的监控需求27-30第4章数据监控系统的设计30-484.1系统设计目标30-314.2系统功能模块-->31-394.2.1用户信息子系

8、统31-324.2.2监控定制子系统324.2.3触发任..............324.2.4数据查询子系统32-354.2.5特殊查询申请子系统35-364.2.6写语句申请子系统364.2.7日志记录子系统364.2.8权限..............36-394.3