【云原生 • Docker】cAdvisor+Prometheus+Grafana 10分钟搞定Docker容器监控平台-当前关注

10分钟搞定Docker容器监控平台

cAdvisor(Container Advisor)Google开源的一个容器监控工具,可用于对容器资源的使用情况和性能进行监控。用于收集、聚合、处理和导出正在运行容器的有关信息。具体来说,该组件对每个容器都会记录其资源隔离参数、历史资源使用情况、完整历史资源使用情况的直方图和网络统计信息。cAdvisor本身就对 Docker容器支持,并且还对其它类型的容器尽可能的提供支持,力求兼容与适配所有类型的容器。

由以上介绍我们可以知道,cAdvisor是用于监控容器引擎的,由于其监控的实用性,Kubernetes已经默认将其与 Kubelet融合作为容器监控指标的默认工具,所以,对于云原生集群直接使用 Kubelet组件提供的指标采集地址即可。


(资料图片)

cAdvisor部署

1、使用以下命令安装启动cAdvisor组件

docker run \  --volume=/:/rootfs:ro \  --volume=/var/run:/var/run:ro \  --volume=/sys:/sys:ro \  --volume=/var/lib/docker/:/var/lib/docker:ro \  --volume=/dev/disk/:/dev/disk:ro \  --publish=8080:8080 \  --detach=true \  --name=cadvisor \  --privileged \  --device=/dev/kmsg \  google/cadvisor:latest

2、此时,cAdvisor组件已经启动,我们可以使用浏览器访问 http://自己IP地址:8080访问到cAdvisor组件Web UI

3、而在多主机的情况下,在所有节点上运行一个cAdvisor再通过各自的Web UI查看监控信息显然不太方便,同时cAdvisor默认只保存2分钟的监控数据。好消息是cAdvisor已经内置了对Prometheus的支持。访问http://自己的IP地址:8080/metrics即可获取到标准的Prometheus监控样本输出:

4、下面表格中列举了一些cAdvisor中获取到的典型监控指标:

指标名称

类型

含义

container_cpu_load_average_10s

gauge

过去10秒容器CPU的平均负载

container_cpu_usage_seconds_total

counter

容器在每个CPU内核上的累积占用时间 (单位:秒)

container_cpu_system_seconds_total

counter

System CPU累积占用时间(单位:秒)

container_cpu_user_seconds_total

counter

User CPU累积占用时间(单位:秒)

container_fs_usage_bytes

gauge

容器中文件系统的使用量(单位:字节)

container_fs_limit_bytes

gauge

容器可以使用的文件系统总量(单位:字节)

container_fs_reads_bytes_total

counter

容器累积读取数据的总量(单位:字节)

container_fs_writes_bytes_total

counter

容器累积写入数据的总量(单位:字节)

container_memory_max_usage_bytes

gauge

容器的最大内存使用量(单位:字节)

container_memory_usage_bytes

gauge

容器当前的内存使用量(单位:字节

container_spec_memory_limit_bytes

gauge

容器的内存使用量限制

machine_memory_bytes

gauge

当前主机的内存总量

container_network_receive_bytes_total

counter

容器网络累积接收数据总量(单位:字节)

container_network_transmit_bytes_total

counter

容器网络累积传输数据总量(单位:字节)

Prometheus部署

1、创建prometheus存储数据外挂目录,避免容器重启丢失:

mkdir -p /disk/docker-monitor/prometheus/datachmod 777 /disk/docker-monitor/prometheus/data

2、prometheus配置文件外挂出来,方便修改,vi /disk/docker-monitor/prometheus/prometheus.yml

global:  scrape_interval: 15s  evaluation_interval: 15s alerting:  alertmanagers:    - static_configs:        - targets:          # - alertmanager:9093rule_files:  - rule/record/*.ymlscrape_configs:  - job_name: "prometheus"    static_configs:      - targets: ["localhost:9090"]  - job_name: "cadvisor"    static_configs:      - targets: ["124.222.45.207:8080"]

❝job_name: "prometheus"配置抓取Prometheus自身相关指标;job_name: "cadvisor"配置抓取之前配置的cAdvisor组件指标。❞

3、Docker部署Prometheus

docker run -d -p 9090:9090 --name prometheus \    -v /disk/docker-monitor/prometheus/conf:/opt/bitnami/prometheus/conf \    -v /disk/docker-monitor/prometheus/data:/opt/bitnami/prometheus/data \    bitnami/prometheus:2.42.0 \    --web.enable-lifecycle --web.enable-admin-api\    --config.file=/opt/bitnami/prometheus/conf/prometheus.yml\    --storage.tsdb.path=/opt/bitnami/prometheus/data

❝--web.enable-lifecycle --web.enable-admin-api提供rest api接口方式管理prometheus,比如配置热加载:curl -XPOST http://localhost:9090/-/reload。注意:这里将prometheus配置文件和存储目录外挂出来,避免容器重启后数据丢失。❞

4、Prometheus启动完成后,浏览器访问:

访问Status -> Targets页面,发现配置的两个抓取Job已经显示,并且State是绿色UP,则接入成功。

5、当能够正常采集到cAdvisor的样本数据后,可以通过以下表达式计算容器的CPU使用率sum(irate(container_cpu_usage_seconds_total{image!=""}[1m])) without (cpu)

Grafana部署

1、部署Grafana

docker run -d --name=grafana -p 3000:3000 -v grafana:/var/lib/grafana grafana/grafana

❝/var/lib/grafana路径外挂出来,该目录存储Grafana插件、数据信息,避免Docker容器重启数据丢失。❞

2、访问:http://自己的IP:3000/login,输入账号admin/admin

3、创建Prometheus类型数据源,指向刚才搭建的Prometheus

4、导入Docker容器监控面板,这里使用11277

5、监控面板就可以看到Docker容器运行情况,如下图,当前运行中容器有4个,总占用内存319MB,总CPU使用率大概1.84%,并以曲线方式展示每个容器的CPU使用率、内存使用率、网络IO和磁盘IO等。

关键词:

【云原生 • Docker】cAdvisor+Prometheus+Grafana 10分钟搞定Docker容器监控平台-当前关注

cAdvisor(ContainerAdvisor)是Google开源的一个容器监控工具,可用于对容器资源的使用情况和性能进行监控。用于收集、聚合、处理

腾讯云 2023-04-22

每日关注!香山股份收年报问询函,要求说明是否存客户依赖风险及对公司生产经营是否造成不利影响

香山股份4月21日收深交所年报问询函,年报显示,公司2022年实现营业收入417亿元,同比下降5%,其中衡器业务营业收入

互联网 2023-04-22

交通运输业多项指标实现正增长 港口集装箱吞吐量同比增长3.5%

交通运输业多项指标实现正增长港口集装箱吞吐量同比增长3 5%---交通运输部4月20日发布数据显示,一季度,我国公路运输量、全国港口吞吐量、水

央视网 2023-04-22

成都大运会开幕式时间+举办场地-环球焦点

成都大运会开幕式开幕式时间:2023年7月28日20:00开幕式地点:东安湖体育公园主体育场场馆介绍:东安湖体育公园主体育场建筑面积120000㎡,建

互联网 2023-04-22

寰宇科技2022年净利542.01万同比减少52.23% 产品利润空间下降_世界热议

挖贝网4月21日,寰宇科技(836503)近日发布2022年度报告,报告期内公司实现营业收入166,520,246 65

金融界 2023-04-22

【天天时快讯】硬核科技论 | 刚搞明白THS又来个Hybrid Max 丰田到底有几个混动系统?

丰田最出名的混合动力系统叫做THS,最近随着16代皇冠的公开又多出一个HybridMax,他们一样吗?各是什么来头?本期《硬核科技论》就来回答这些

搜狐科技 2023-04-22

驾驶者在第一场降雪时犯的错误

在寒冷的季节,许多驾驶者无法从一种驾驶方式切换到另一种驾驶方式。冬季被认为是最危险的季节,因为它伴随着由于天气条件导致的

互联网 2023-04-22

【云原生 • Docker】cAdvisor+Prometheus+Grafana 10分钟搞定Docker容器监控平台-当前关注

cAdvisor(ContainerAdvisor)是Google开源的一个容器监控工具,可用于对容器资源的使用情况和性能进行监控。用于收集、聚合、处理

腾讯云 2023-04-22

每日关注!香山股份收年报问询函,要求说明是否存客户依赖风险及对公司生产经营是否造成不利影响

香山股份4月21日收深交所年报问询函,年报显示,公司2022年实现营业收入417亿元,同比下降5%,其中衡器业务营业收入

互联网 2023-04-22

交通运输业多项指标实现正增长 港口集装箱吞吐量同比增长3.5%

交通运输业多项指标实现正增长港口集装箱吞吐量同比增长3 5%---交通运输部4月20日发布数据显示,一季度,我国公路运输量、全国港口吞吐量、水

央视网 2023-04-22

成都大运会开幕式时间+举办场地-环球焦点

成都大运会开幕式开幕式时间:2023年7月28日20:00开幕式地点:东安湖体育公园主体育场场馆介绍:东安湖体育公园主体育场建筑面积120000㎡,建

互联网 2023-04-22

寰宇科技2022年净利542.01万同比减少52.23% 产品利润空间下降_世界热议

挖贝网4月21日,寰宇科技(836503)近日发布2022年度报告,报告期内公司实现营业收入166,520,246 65

金融界 2023-04-22

【天天时快讯】硬核科技论 | 刚搞明白THS又来个Hybrid Max 丰田到底有几个混动系统?

丰田最出名的混合动力系统叫做THS,最近随着16代皇冠的公开又多出一个HybridMax,他们一样吗?各是什么来头?本期《硬核科技论》就来回答这些

搜狐科技 2023-04-22

驾驶者在第一场降雪时犯的错误

在寒冷的季节,许多驾驶者无法从一种驾驶方式切换到另一种驾驶方式。冬季被认为是最危险的季节,因为它伴随着由于天气条件导致的

互联网 2023-04-22
x 广告
x 广告
x 广告

Copyright   2015-2022 海峡仓储网版权所有  备案号:皖ICP备2022009963号-10   联系邮箱:396 029 142 @qq.com