阿里云监控体系现状概览

《阿里云监控体系现状概览》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、本文根据InfoQ中文站跟阿里云产品技术部产品总监马劲的在2014年10月初的一次电话交流整理而成，褚霸对本采访内容亦有所贡献。在本次沟通中，马劲对阿里云监控体系的现状进行了简单介绍，涉及到监控的覆盖面、监控粒度、故障识别、OpenAPI的开放进度等方面。嘉宾简介马劲，花名竹蜓，来自阿里云产品技术部，是阿里云四大主题（云服务器，存储和多媒体、数据平台、中间件）的产品总监之一，负责阿里云所有中间件产品管理，目前负责管理的产品有OCS（缓存）、MQS（消息队列）、ACE（云引擎）、ESS（弹性扩展）、PTS（性能测试

2、）、OpenSearch（开放搜索）、ONS（开放消息服务）、云监控。竹蜓之前在IBM有13年工作经历，曾经担任云计算软件全球产品总监、大中华区软件VIP客户服务总监、大中华区软件培训负责人、攻城狮、程序猿等多个职位。背景概述监控体系是云计算基础架构最重要的组成部分Z-O阿里云监控体系有两个视角：运维自己的集群监控体系，由技术保障部主导；以及用户视角的监控产品（如云监控服务），由产品技术部主导。运维的工作着眼于掌握每个服务的可用性、可靠性数据，提升发现问题解决问题的速度；客户的需求则是可以方便的看到自己阿里云资源

3、的状态，包括资源的稳定情况和资源消耗情况等，以及客户基于阿里云的应用的状态，例如应用是否可用，性能如何。当然，无论是何种角度的监控，底层基础架构是共享的。过去一年主要完成的相关工作包扌舌：•为阿里云的各个产品逐步建立全链路监控，完成对所有服务各个模块端到端的数据采集（运维视角）•在2014年4月开始“云监控”产品的公测，目前包含站点监控、ECS监控以及自定义监控。ECS的CPU、内存、10、存储等资源的状态，现在所有人都可以通过API项获収（用户视角）•RDS、SLB在“云监控”上的接入正在实现当屮（用户视角）R

4、DS的监控褚霸:RDS全链路监控现在基本都做完了。RDS较早做到全链路监控，是因为用户对数据库的QPS和RT变化非常敏感，倒逼着我们对系统更深入把控。这就要求我们能够从网络（交换机）、操作系统、LVS、中间层、数据库整个链路能够从用户的视角收集到详尽的数据，通过流计算平台聚合、对比来看到界常，先于用户发现变坏的趋势，在更短的时间内做出响应。全链路是个麻绳，需耍整个链条上的每个部件都暴露出足够多的信息（特别是用户触发的行为动作），透过这个麻绳串起来。比如说RDS中间层统计数据在内存中按照树状组织的,基本上所有的内部

5、模块都有详细的运行状态，日志和诊断代码在中间层中占比达到30%o这些状态都在内存屮，抓取统计数据的代价是恒定的，精细到每个用户的链接，再聚合成用户级别，主机级别，集群级别在监控系统界面上关联展现，指标超过150个，基木可以做到白盒，对系统的运行了如指掌。监控粒度ECS±的CPU争抢情况己经按秒级采集数据,而对于IO访问的访问请求监控是更细粒度，统计到每个IO访问的响应延时。监控的目的提供稳定的服务，在出了问题以后能尽快处置，即使做到十毫秒级，如果还是基于事件，问题报警，也是事后诸葛亮。监控希望能做到事前分析与预测

6、，所谓后发先至，避免发生影响服务的事件，这本身是一个IT数据的人数据应用的课题，例如我们正在分析VM的CPU消耗周期变化尽可能把CPU密集的VM均匀分布到不同的物理机器上，同时正在开发动态热点迁移技术进一步提高用户体验。做到秒级不是目标，做到主动预测、主动干预化解问题，避免服务对外不可用，才是我们的目标。故障预测基于全链路的监控与分析平台，我们对每一次的故障进行review,将故障原因的相关指征提取出来，形成预警方法。有些故障是由软件更新的bug触发，不过bug触发的问题如果能够提取为指征，也可以回归到预警系统。

7、另外，通过异常分析也可能找出可能未知的问题，报警让人来分析。全链路监控与分析平台现在在RDS上得到应用已经取得不错的效果，ECS、SLB和CDN等正在应用该平台。弹性计算服务阿里云正在做ElasticScalingService弹性计算服务，原计划8月发布，但是觉得还达不到公测的质量水平标准，所以有所延迟，预计近期（10月）会推出邀请测试。第三方监控服务其实公测阶段的云监控产品目前还不太完善。比如ECS实例监控，现在还需要客户手动下载安装Agent,这对于ECS服务器数量多的客户是工作量很大的，可以做得更加自动化

8、。阿里云的云监控会提供更多服务，同时也欢迎第三方能够针对阿里云开发一些高级的监控。目前市场上已经有客户自己安装了第三方监控可以在阿里云上使用，包括商业监控软件和开源监控软件对阿里云资源的监控，也有客户自己订阅了监控SaaS服务来监控他们跑在阿里云上的应用，包括一些国外的SaaS监控（如NewRelic）。阿里云的云监控提供OpenAPI,目前已经在针对小部分可信用户进行内