docker监控方案实践（cadvisor+influxdb+grafana）

一、概要

1.1 背景

虚拟化技术如今已经非常热门，如果你不知道什么是虚拟化，那你应该了解虚拟机。虚拟化技术如同虚拟机一样，用于将某些硬件通过软件方式实现"复制"，虚拟出"硬件系统" 并且能够对该虚拟的硬件系统实现一系列骚操作。
       docker作为出色的虚拟化技术，其技术发展壮大的同时，使用docker部署主机和服务的情况越来越多。可虚拟化终究是虚拟化，它需要依托与真实的主机之上，所以面对日益庞大的docker服务群应用，需要做好有效的监控。
        本文对docker不做详细介绍，主要讲解使用cadvisor+influxdb+grafana三大开源框架组成的docker服务群监控方案。

1.2 主流监控方案

1、使用docker自带的命令docker stats（有局限性）
2、cadvisor（开源）
3、Data Dog（它是这几个中最好的，但是收费）
4、Sensu Monitoring Framework（Sensu集群复杂，不易于部署）
5、Scout（收费）

1.3 软件简介

cadvisor：

Google开源的用于监控基础设施应用的工具，可以零配置运行在docker主机上来监控Docker主机以及Docker容器。其为但节点监控，只能监控一个主机。多节点监控可参考Google的Kubernetes。作为docker服务的监控数据收集器，提供给influxdb。

influxdb：

InfluxDB 是用Go语言编写的一个开源分布式时序、事件和指标数据库，无需外部依赖、提供管理界面。提供基于时间序列，基于事件的可度量的实时计算功能。作为数据存储器以及分析函数支持，与elk中elasticsearch作用类似，但此数据库偏向存储实时数据。

grafana：

Grafana可视化大型测量数据的开源程序，有灵活丰富的图形化选项，可以混合多种风格，多个数据源例如Graphite、zabbix、InfluxDB、Prometheus、mysql和OpenTSDB 详见配置页面。作为数据分析的可视化展示，与influxdb配合实现监控目的。与elk中kibana类似，但此可视化偏向实时监控数据展示。

1.4 架构原理图

数据流向： docker主机+docker容器-->cadvisor-->influxdb-->granfana-->web页面

二、准备

2.1 环境准备

安装docker环境 ：centos7下安装docker及配置docker

2.2 拉取镜像

docker pull tutum/influxdb:latest
docker pull grafana/grafana:latest
docker pull google/cadvisor:latest

2.3 创建虚拟网卡（网络环境隔离）

docker network create docker-monitor

备注：docker 要使用该网卡，需要docker --net  docker-monitor指定。

三、部署服务

3.1 部署influxdb

docker run --name influxdb -d --net docker-monitor -p : -p : tutum/influxdb:latest

备注：8083为infuxdb后台控制端口，8086是infuxdb的数据端口
通过web访问：http://10.0.0.110:8083

添加管理员角色，创建数据库（作为后续存储）

CREATE USER "root" WITH PASSWORD 'root' WITH ALL PRIVILEGES ##创建管理员角色 root 密码 root 供使用
CREATE DATABASE "cadvisor"                                  ##创建数据库 cadvisor 用于接收cadvisor的监控数据

3.2 部署cadvisor

docker run -d --name=cadvisor --net docker-monitor \
-p : -v/:/rootfs,ro -v /var/run:/var/run \
-v /sys:/sys,ro -v /var/lib/docker:/var/lib/docker,ro \
google/cadvisor -storage_driver=influxdb -storage_driver_db=cadvisor \
-storage_driver_host=influxdb: 

备注:

--privileged=true ：设置挂载目录权限为最大 否则挂载出错
--volume=/sys:/sys:ro ：rw表示读写 ro表示只读
--name=cadvisor google/cadvisor :pull会从docker默认仓库下载google/cadvisor镜像
-storage_driver=influxdb ：绑定存储驱动 为 influxdb
-storage_driver_db=cadvisor ：数据库为 cadvisor
-storage_driver_host=influxdb: ：绑定数据库管理地址 容器名:容器端口

通过web访问： http://10.0.0.110:8080

3.3 部署grafana

docker run --name grafana -d -p : --net docker-monitor grafana/grafana

通过web访问：http://10.0.0.110:3000      默认帐号admin admin

四、简单使用

以记录本教程三大框架的内存实时监控数据展示为例

4.1 登录grafana

4.2 设置数据源

home主页
左到右分别是
安装grafana 添加数据源 添加面板 设置用户权限 安装插件

备注:数据源有多种，influxdbd对实时时序数据有良好的存储方案。可以根据业务场景切换

4.3 设置添加面板

回到主页进行添加

备注：grafana新建面板类似与一个图表的展示页面 其图表需要进行添加和编辑

新建了一个监控项之后，回来HOME，可以发现刚才创建的项目：

五、 总结

1、使用docker进行部署服务，省去了大量操作，且docker还有dockerfile等技术可以对环境部署进行批量化操作

2、对应docker监考，本架构可以满足基本的监控。因为influxdb为设计用于时序以及注重实时，其存储持久性有所取舍。

3、cadvisor监控与docker融合好，但是其为单节点监控，占据一定的docker主机空间。