腾讯云容器服务监控体系详解

腾讯云容器服务监控系统可以监控集群中所有的节点,服务,实例,容器的相关信息,并且以曲线的方式展示给用户,同时支持多种粒度的统计方式。监控的基础数据是由 cAdvisor 获取,然后上报至监控平台进行聚合。本文将讲解容器监控框架和指标统计方式。

1. 框架概览

1.1 Container

Container 为当前该集群节点(VM)上所有的容器,包括但不限于:

  1. 腾讯云容器服务创建的
  2. Kubenertes Api 创建的
  3. docker run 创建的

1.2 cAdvisor

cAdvisor 做为一个运行中的 daemon,会自动收集所有运行时容器的监控信息,例如 cpu,mem 等,经过一定的计算和分类通过页面或者 api 的方式提供调用。kubenertes 已经将 cAdvisor 功能集成到 kubelet 组件中,同时通过节点 IP+端口也可以直接进行 cAdvisor web 访问。

cAdvisor web 访问方式: http://VmIp:4194

1.3 Agent

每一台集群节点(VM)上会部署一个专门收集监控信息的 agent,每个 agent 会在集群节点创建时默认安装并运行,agent 会每分钟调用 cAdvisor api 获取容器的监控信息进行汇总,并且按照多种视图的方式进行聚合计算等等操作,最终汇总成一个包含容器,服务,节点,集群,命名空间的有层级的原始数据上报至 Tencent Cloud Monitor Service.

1.4 Tencent Cloud Monitor Service(腾讯云监控服务)

Tencent Cloud Monitor Service 获取 agent 每分钟上报的结果,通过我们在监控平台上配置的不同视图,不同维度的统计方式进行二次聚合,最终以标准的腾讯云 API 的形式提供给用户调用。具体的调用方式可以查看 获取容器服务监控数据

2. 指标详细说明

容器服务以多种视图的方式提供监控视图,视图可以看做是一种分类,每一个视图通过不同的聚合方式,维度,和指标提供独立的监控数据。下面会列举出现在容器服务支持的所有视图和其监控指标,并且解释其统计方式

2.1 集群视图

监控项

指标名称

单位

说明

统计方式

集群 CPU 利用率

dc_cpu_usage

%

集群内节点的平均 CPU 利用率

1 分钟 avg,5 分钟 max,1 小时 max,1 天 max

集群内存利用率

dc_mem_usage

%

集群内节点的平均内存利用率

1 分钟 avg,5 分钟 max,1 小时 max,1 天 max

2.2 服务视图

监控项

指标名称

单位

说明

统计方式

服务 CPU 使用情况

service_cpu_used

服务内所有容器实例 CPU 使用之和

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

服务 CPU 使用率(占集群)

service_cpu_usage_for_cluster

%

服务使用 CPU 占集群比率

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

服务内存使用情况

service_mem_used

MiB

服务内所有容器实例内存使用之和

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

服务内存使用率(占集群)

service_mem_usage_for_cluster

%

服务使用内存占集群比率

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

服务网络入流量

service_in_flux

MB

服务内所有实例在该时间窗口入流量之和

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

服务网络出流量

service_out_flux

MB

服务内所有实例在该时间窗口出流量之和

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

服务网络入带宽

service_in_bandwidth

Mbps

服务内所有实例的入带宽之和

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

服务网络出带宽

service_out_bandwidth

Mbps

服务内所有实例的出带宽之和

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

服务网络入包量

service_in_packets

个/s

服务内所有实例的入包量之和

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

服务网络出包量

service_out_packets

个/s

服务内所有实例的出包量之和

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

2.3 实例视图

监控项

指标名称

单位

说明

统计方式

实例网络入带宽

pod_in_bandwidth

Mbps

同一实例内容器共享网络,实例(pod) 的网络入带宽

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

实例网络出带宽

pod_out_bandwidth

Mbps

同一实例内容器共享网络,实例(pod) 的网络出带宽

1 分钟 sum,5 分钟 max,1 小时 max,1 天 max

实例网络入流量

pod_in_flux

MB

同一实例内容器共享网络,实例(pod) 的网络入流量

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

实例网络出流量

pod_out_flux

MB

同一实例内容器共享网络,实例(pod) 的网络出流量

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

实例网络入包量

pod_in_packets

个/s

同一实例内容器共享网络,实例(pod) 的网络入包量

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

实例网络出包量

pod_out_packets

个/s

同一实例内容器共享网络,实例(pod) 的网络出包量

1 分钟 sum,5 分钟 sum,1 小时 sum,1 天 sum

2.3 容器视图

监控项

指标名称

单位

说明

统计方式

容器 CPU 使用情况

container_cpu_used

容器 CPU 使用量

5 分钟 max,1 小时 max,1 天 max

容器 CPU 使用率(占主机)

container_cpu_usage_for_node

%

容器 CPU 使用占主机

5 分钟 max,1 小时 max,1 天 max

容器 CPU 使用率(占 Request)

container_cpu_usage_for_request

%

容器 CPU 使用占 Request

5 分钟 max,1 小时 max,1 天 max

容器 CPU 使用率(占 Limit)

container_cpu_usage_for_limit

%

容器 CPU 使用占 Limit

5 分钟 max,1 小时 max,1 天 max

容器内存使用情况

container_mem_used

MiB

容器内存使用量

5 分钟 max,1 小时 max,1 天 max

容器内存使用率(占主机)

container_mem_usage_for_node

%

容器内存使用占主机

5 分钟 max,1 小时 max,1 天 max

容器内存使用率(占 Request)

container_mem_usage_for_request

%

容器内存使用占 Request

5 分钟 max,1 小时 max,1 天 max

容器内存使用率(占 Limit)

container_mem_usage_for_limit

%

容器内存使用占 Limit

5 分钟 max,1 小时 max,1 天 max

容器磁盘读流量

container_disk_read_traffic

KB/s

容器对磁盘读流量

5 分钟 max,1 小时 max,1 天 max

容器磁盘写流量

container_disk_write_traffic

KB/s

容器对磁盘写流量

5 分钟 max,1 小时 max,1 天 max

容器磁盘读 IOPS

container_disk_read

count

容器对磁盘读 IOPS

5 分钟 max,1 小时 max,1 天 max

容器磁盘写 IOPS

container_disk_write

count

容器对磁盘写 IOPS

5 分钟 max,1 小时 max,1 天 max

2.4 统计方式说明

上面所描述的统计方式,例如:service_cpu_used(服务 cpu 使用量) 1 分钟 sum,5 分钟 max,1 小时 max,1 天 max,解释如下:

1 分钟 max: 服务下的所有容器每分钟上报的 cpu 使用量之合 5 分钟 max: 基于 1 分钟的统计结果,5 分钟共 5 个点,取其中最大值 1 小时 max: 基于 5 分钟的统计结果,1 小时共 12 个点,取其中最大值 1 天 max: 基于 1 分钟的统计结果,1 小时共 1440 个点,取其中最大值

其他统计方式与这个类似,其中容器视同中的指标没有 1 分钟统计方式,因为容器为最小粒度,顾只需取得上报的值,即为最后的输出值,不需要做聚合。

3.总结

腾讯云容器服务的监控是基于 cAdvisor 来获取基础数据,并且通过一系列的计算,汇总最终呈现给用户。指标覆盖集群,服务,实例,容器四大部分,共 30 个监控指标,基本涵盖了大部分用户诉求,同时提供控制台页面和云 API 两种方式输出。欢迎大家使用!

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

编辑于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏coding

引用第三方样式库实现动画

animate.css是一个能渲染出炫酷效果的css库,只需引用该css库,在相应的元素上加上class类名,即可实现。

521
来自专栏PPV课数据科学社区

R语言—帕累托图

本文的主要目的有两个一个是学习如何在R中绘制帕累托图,另一个是如何绘制双坐标图,其中前三个例子是用绘制双坐标的方式绘制帕累托图的,其余为直接生成的帕累托图 @...

3606
来自专栏cnblogs

【留言板】可编辑输入框操作总结

闲暇之余,用于加深自己对基础的了解,徒手撸了一个留言板:输入框。废话少说,进入正题。简陋的效果如下(下载代码): ? 一、定义需求 可输入文本,以及插入表情。 ...

19610
来自专栏ytkah

微信公众平台数据接口开始内测

微信公众平台每天的数据量越来越庞大了,新年红包再次延迟逐显服务器压力,微信也慢慢开放一些接口给第三方平台,这不,今天微信公众平台数据接口开始公测了。微信公众平台...

2935
来自专栏咸鱼不闲

jsp与数据库的面对面交流

前言:要完成数据的交互的一种方式就是jsp+jsp+数据库。下面就来演示一个用jsp展示数据库内的图片的小例子。

823
来自专栏性能与架构

持续集成、持续交付、持续部署 的区别与关系

持续集成 尽可能快的把不同开发人员修改的代码集成到一起,通常一天进行多次 需要结合自动化单元测试,每次集成都运行一整套单元测试 目标是尽快发现代码问题 ...

2965
来自专栏皮振伟的专栏

[network][wenbench]一款不错的HTTP压力测试工具

前言: 作者曾经接到一个需求,会在一个相对较短的时间内,会有大量的http请求。 代码写完之后,需要压力测试一下。在网上无意间看到过webbench这个工具,于...

2788
来自专栏吾爱乐享

php学习之html属性-框架(八)

1033
来自专栏Youngxj

让访客自动加自己为QQ好友代码

1454
来自专栏抠抠空间

爬虫简介

1750

扫码关注云+社区