docker 容器监控

323 阅读4分钟

docker stats

docker stats 命令可以很方便的看到当前宿主机上所有容器的 CPU,内存以及网络流量等数据。但是 docker stats 命令的缺点就是统计的只是当前宿主机的所有容器,而获取的监控数据是实时的,没有地方存储,也没有报警功能。

docker stats
# 以下命令输出详细信息
CONTAINER ID        NAME                CPU %               MEM USAGE / LIMIT     MEM %               NET I/O             BLOCK I/O           PIDS
b090bb29d0f4        dubbo-admin         0.10%               146.3MiB / 1.795GiB   7.96%               8.87kB / 8.69kB     0B / 0B             29
3669b852bbaf        zoo3                0.12%               35.79MiB / 1.795GiB   1.95%               788B / 0B           0B / 0B             15
b820d9dcf24c        zoo2                0.12%               35.3MiB / 1.795GiB    1.92%               788B / 0B           0B / 0B             15
0eb94647ac3d        zoo1                0.13%               35.98MiB / 1.795GiB   1.96%               788B / 0B           0B / 0B             15

CAdvisor简介

CAdvisor 是一个容器资源监控工具,包括容器的内存,CPU,网络IO,磁盘 IO 等监控,同时提供了一个 WEB 页面用于查看容器的实时运行状态。CAdvisor 默认存储 2 分钟的数据,而且只是针对单物理机。不过,CAdvisor 提供了很多数据集成接口,支持 InfluxDB,Redis,Kafka, Elasticsearch 等集成,可以加上对应配置将监控数据发往这些数据库存储起来。

  • CAdvisor 功能主要有两点: 展示 Host 和容器两个层次的监控数据。 展示历史变化数据。
  • 缺点:默认只在本地保存2分钟数据

InfluxDB简介

InfluxDB 是用 Go 语言编写的一个开源分布式时序、事件和指标数据库,无需外部依赖。 InfluxDB 是一个时序数据库,专门用于存储时序相关数据,很适合存储 CAdvisor 的数据。而且, CAdvisor 本身已经提供了 InfluxDB 的集成方法,在启动容器时指定配置即可

InfluxDB 主要功能:

  • 基于时间序列,支持与时间有关的相关函数(如最大,最小,求和等)
  • 可度量性:你可以实时对大量数据进行计算
  • 基于事件:它支持任意的事件数据

InfluxDB 主要特点:

  • 无结构(无模式);
  • 可以是任意数量的列;
  • 可拓展的;
  • 支持 min, max, sum, count, mean, median 等一系列函数,方便统计;
  • 原生的 HTTP 支持,内置 HTTP API;
  • 强大的类 SQL 语法;
  • 自带管理界面,方便使用

Grafana 简介

Grafana 是一个开源的数据监控分析可视化平台,支持多种数据源配置(支持的数据源包括 InfluxDB,MySQL,Elasticsearch,OpenTSDB,Graphite 等)和丰富的插件及模板功能 支持图表权限控制和报警

Grafana 主要特性:

  • 灵活丰富的图形化选项
  • 可以混合多种风格
  • 多个数据源

grafana + infuxdb + CAdvisor

  • CAdvisor:负责收集容器的随时间变化的数据
  • InfluxDB:负责存储时序数据
  • Grafana: 负责分析和展示时序数据

容器监控docker-compose.yml文件

version: '3.1'

# 如果不想挂载数据到本地就直接使用volume
# 如果是挂载到本地需要对data/grafana_data文件赋权并改变用户组:
# 1.chmod +x data/grafana_data && chown -R 472:472 data/grafana_data
# 或者直接给777权限 chmod +777 data/grafana_data
# 默认不写则会保存在/var/lib/docker/volume下
volumes:
  grafana_data: {}
  
services:

 influxdb:
  # 0.9版本提供web界面
  image: tutum/influxdb:0.9
  # 重启策略:失败自动重启
  restart: always
  # influxdb 容器启动时创建数据库为:cadvisor
  environment:
    - PRE_CREATE_DB=cadvisor
  # 8083 web操作端口
  # 8086 对外提供访问的端口,可以想下mysql 3306端口
  ports:
    - "8083:8083"
    - "8086:8086"
  volumes:
    - ./data/influxdb:/data
    
 cadvisor:
  image: google/cadvisor
  # 容器链接(决定了容器启动顺序 、依赖)
  links:
    - influxdb:influxsrv
  # 指定启动该容器时 数据库Drvier、数据库名称、数据库服务地址(参考mysql方式)
  command: -storage_driver=influxdb -storage_driver_db=cadvisor -storage_driver_host=influxsrv:8086
  # 重启策略:失败自动重启
  restart: always
  # web端口
  ports:
    - "8080:8080"
  # 数据卷
  volumes:
    - /:/rootfs:ro
    - /var/run:/var/run:rw
    - /sys:/sys:ro
    - /var/lib/docker/:/var/lib/docker:ro
    
 grafana:
  #image: grafana/grafana:2.6.0
  #user: "472"
  image: grafana/grafana
  #user: "104"
  user: "472"
  restart: always
  links:
    - influxdb:influxsrv
  ports:
    - "3000:3000"
  volumes:
    - ./data/grafana:/var/lib/grafana
  # web用户名
  # web密码
  # 数据库服务器地址
  # 数据库端口
  # 数据库名
  # 数据库用户名
  # 数据库密码
  environment:
    - HTTP_USER=admin
    - HTTP_PASS=admin
    - INFLUXDB_HOST=influxsrv
    - INFLUXDB_PORT=8086
    - INFLUXDB_NAME=cadvisor
    - INFLUXDB_USER=root
    - INFLUXDB_PASS=root

配置数据源&sql查询

  • 在HTTP模块下配置influxdb数据源
  • 在influxdb details 下配置数据库名称 database

最终效果