boss系统日志研究探究和应用

《boss系统日志研究探究和应用》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、BOSS系统日志研究探究和应用摘要：当前营业员和用户在BOSS系统办理业务出现问题和故障的时候，通常由用户打10086投诉或者营业员报障给后台维护人员进行故障处理，这个处理流程很耗时间，影响问题的解决效率。BOSS系统日志文件中有大量的信息，从中可以获取到系统详细出错信息。通过建立日志分析管理平台，实时采集BOSS系统各台主机上的日志文件，对达到一定阀值的错误进行告警，并对日志信息进行分析，提供给维护人员进行问题的分析、定位和解决，大大提高问题发现和解决的效率，提升前台业务人员和客户对业务支撑系统的满意度。

2、关键词：日志规整；实时采集；日志分析中图分类号：TP311文献标识码：A文章编号：1009-3044(2013)28-6433-041背景当前营业员和用户在业务支撑系统(简称：BOSS系统)办理业务出现问题和故障的时候，通常由用户打10086投诉或者营业员报障给后台维护人员进行故障分析和处理。这个处理流程很耗时间，影响问题的解决效率。在BOSS系统的各个渠道查询或受理业务的过程中，都有可能会因网络、数据库、应用系统等各方面原因抛出异常错误信息，这类错误信息记录在BOSS系统各主机的日志文件中，由于BOSS系

3、统每天产生大量的日志文件，从日志文件中定位查找错误信息需要花费大量的时间，对维护人员处理问题和故障带来不便，影响问题的及时发现和处理实效性。2研究思路考虑从主机的日志文件中及时地收集到这种系统异常错误信息，并自动入库进行分析，维护人员就能及时的了解BOSS系统当前的运行情况，发现系统问题，查询错误信息，能够在营业员或客户投诉之前就可以去核查解决，提升问题处理的及时性和效率，保障系统健康稳定的运行，从而提高系统业务支撑水平，提升营业员和客户的内外部满意度。3实现方案建立BOSS系统日志分析管理平台，对BOSS

4、系统主机产生的各种日志进行日志异常分析和日志管理，针对主机系统产生的大量日志文件进行处理：日志采集，日志管理，日志分析，日志综合告警执行以及执行前流程审批权限设立、分析结果处理执行中的流程跟踪、分析结果处理执行后的日志留痕。通过日志分析管理平台，维护人员能够方便的查看日志的分析结果、以及日志异常产生的次数和时间段，如系统错误产生的次数、产生的时间段、业务执行人员信息记录、业务执行影响等信息，从另一个角度去分析主机的稳定情况以及运行效率，以往一些不容易察觉的异常信息，通过对日志分析规则的配置和数据采集，也会在

5、系统中体现出来，从而提高系统维护管理的水平。3.1日志分析平台系统架构系统架构说明：1）采集客户端：运行在生产主机上的采集客户端程序,负责收集相关日志，预处理并通过socket方式发送给采集服务端。2）采集服务：采集服务端对消息进行缓存，由消息处理器进行异步处理，生成消息首先放入内存，同时发给实时告警，当内存中的记录数达到配置的阀值时写入文件数据库。3）告警处理:实时告警收到消息后根据告警规则配置进行处理，并将结果入库。4）查询服务：查询服务接收web端和统计进程的查询请求，从文件数据库和采集服务端的内存中

6、查询符合条件的记录返回给调用端。3.2日志分析平台系统功能系统功能说明:1）日志监控采集：从各渠道的业务主机上实时读取新生成日志信息。由于BOSS系统各台主机上每天生成的日志信息量很庞大（达到830G）,因此部署的客户端程序要能够实时采集日志，并且对主机性能不会造成大的影响。设计上采用客户端部署日志爬虫程序，实时采集日志并传送给服务端，采集传送时间4应用效果BOSS系统日志分析管理平台2011年12月上线后，通过部署在CRM系统一台中间件主机上的日志采集客户端程序对日志文件进行统一采集，发送到日志分析服务器

7、上进行统一管理和展现，取得较好的应用效果：1）采集处理对中间件主机的CPU使用率的影响很小（