zabbix企业应用之监控docker容器资源情况

原创作品，允许转载，转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://dl528888.blog.51cto.com/2382721/1660844

关于docker的监控，无论开源的CAdvisor、Data Dog还是我自己写的监控（http://dl528888.blog.51cto.com/2382721/1635951），不是通过docker的stats api就是使用socket来进行。

单独看一个主机的监控项还行，比如只查看容器test的cpu、内存还是网络，但如果想批量查看的话，比如查看容器test1-test10的所有监控项或者只是看cpu资源使用比较费劲了，现在我使用zabbix通过docker stats api监控容器资源，然后使用lld技术自动监控，使用zatree进行批量展示监控效果。

不说太多的废话，直接看效果图，满足自己需求在继续深入研究

一、效果图

1、监控容器cpu使用率

2、监控容器内存使用量

3、监控容器网络流量值

目前我监控docker就监控这些东西，至于其他的资源个人有需求可以自己写。

下面是如何部署

二、部署

1、环境

我的zabbix是2.0.6，所以想使用我的模板，必须是2.0.x以上的zabbix版本；

docker使用1.6版本，如果想使用我的监控，docker必须大于1.5；

需要安装jq，如何安装参考http://stedolan.github.io/jq/tutorial/

监控客户端里必须安装docker的python 模块

安装的话，可以使用

1

easy_install docker-py

2、客户端部署

A.在zabbix_agentd.conf最后添加以下内容

1

2

UserParameter=zabbix_low_discovery[*],/bin/bash /usr/local/zabbix/bin/zabbix_low_discovery.sh $1

UserParameter=docker_stats[*],sudo /usr/local/zabbix/bin/zabbix_monitor_docker.py $1 $2

B.把下面的脚本放到/usr/local/zabbix/bin里，然后给与755权限，并修改用户与组为zabbix

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

[root@ip-10-10-125-8 bin]# cat zabbix_monitor_docker.py

#!/usr/bin/env python

#-*- coding: utf-8 -*-

#author:Deng Lei

#email: [e-mail]

from docker import Client

import os

import re

import sys

import subprocess

import time

def check_container_stats(container_name,collect_item):

    container_collect=docker_client.stats(container_name)

    old_result=eval(container_collect.next())

    new_result=eval(container_collect.next())

    container_collect.close()

    if collect_item == 'cpu_total_usage':

        result=new_result['cpu_stats']['cpu_usage']['total_usage'] - old_result['cpu_stats']['cpu_usage']['total_usage']

    elif collect_item == 'cpu_system_uasge':

        result=new_result['cpu_stats']['system_cpu_usage'] - old_result['cpu_stats']['system_cpu_usage']

    elif collect_item == 'cpu_percent':

    cpu_total_usage=new_result['cpu_stats']['cpu_usage']['total_usage'] - old_result['cpu_stats']['cpu_usage']['total_usage']

    cpu_system_uasge=new_result['cpu_stats']['system_cpu_usage'] - old_result['cpu_stats']['system_cpu_usage']

        cpu_num=len(old_result['cpu_stats']['cpu_usage']['percpu_usage'])

        result=round((float(cpu_total_usage)/float(cpu_system_uasge))*cpu_num*100.0,2)

    elif collect_item == 'mem_usage':

        result=new_result['memory_stats']['usage']

    elif collect_item == 'mem_limit':

        result=new_result['memory_stats']['limit']

    elif collect_item == 'mem_percent':

    mem_usage=new_result['memory_stats']['usage']

    mem_limit=new_result['memory_stats']['limit']

        result=round(float(mem_usage)/float(mem_limit)*100.0,2)

    #network_rx_packets=new_result['network']['rx_packets']

    #network_tx_packets=new_result['network']['tx_packets']

    elif collect_item == 'network_rx_bytes':

        network_check_command="""docker exec %s ifconfig eth1|grep bytes|awk -F ':' '{print $2,$3}'|awk -F '(' '{print $1,$2}'|awk -F ')' '{print $1}'|awk '{print "{\\"rx\\":"$1",\\"tx\\":"$2"}"}'"""%container_name

        network_old_result=eval(((subprocess.Popen(network_check_command,shell=True,stdout=subprocess.PIPE)).stdout.readlines()[0]).strip('\n'))

        time.sleep(1)

        network_new_result=eval(((subprocess.Popen(network_check_command,shell=True,stdout=subprocess.PIPE)).stdout.readlines()[0]).strip('\n'))

        #unit KB

        result=int(network_new_result['rx']) - int(network_old_result['rx'])

    elif collect_item == 'network_tx_bytes':

        network_check_command="""docker exec %s ifconfig eth1|grep bytes|awk -F ':' '{print $2,$3}'|awk -F '(' '{print $1,$2}'|awk -F ')' '{print $1}'|awk '{print "{\\"rx\\":"$1",\\"tx\\":"$2"}"}'"""%container_name

        network_old_result=eval(((subprocess.Popen(network_check_command,shell=True,stdout=subprocess.PIPE)).stdout.readlines()[0]).strip('\n'))

        time.sleep(1)

        network_new_result=eval(((subprocess.Popen(network_check_command,shell=True,stdout=subprocess.PIPE)).stdout.readlines()[0]).strip('\n'))

        result=int(network_new_result['tx']) - int(network_old_result['tx'])

    return result

if __name__ == "__main__":

    docker_client = Client(base_url='unix://var/run/docker.sock', version='1.17')

    container_name=sys.argv[1]

    collect_item=sys.argv[2]

    print check_container_stats(container_name,collect_item)

C.监控内容的json化

下面在是我的json监控docker容器的json展示

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

[root@ip-10-10-125-6 ~]# sh /usr/local/zabbix/bin/zabbix_low_discovery.sh docker

{

    "data":[

     {

            "{#CONTAINERNAME}":"nodeA"},

     {

            "{#CONTAINERNAME}":"xiaotg-mesos.5"},

     {

            "{#CONTAINERNAME}":"xiaotg-mesos.4"},

     {

            "{#CONTAINERNAME}":"xiaotg-mesos.3"},

     {

            "{#CONTAINERNAME}":"xiaotg-mesos.2"},

     {

            "{#CONTAINERNAME}":"xiaotg-mesos.1"},

     {

            "{#CONTAINERNAME}":"xiaotg-mesos.0"},

     {

            "{#CONTAINERNAME}":"ulimit_test.1"},

     {

            "{#CONTAINERNAME}":"ulimit_test.0"}

     ]

}

脚本内容如下：

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

[root@ip-10-10-125-6 tmp]# cat zabbix_low_discovery.sh

#!/bin/bash

#Fucation:zabbix low-level discovery

docker() {

            port=($(sudo docker ps -a|grep -v "CONTAINER ID"|awk '{print $NF}'))

            printf '{\n'

            printf '\t"data":[\n'

               for key in ${!port[@]}

                   do

                       if [[ "${#port[@]}" -gt 1 && "${key}" -ne "$((${#port[@]}-1))" ]];then

                          printf '\t {\n'

                          printf "\t\t\t\"{#CONTAINERNAME}\":\"${port[${key}]}\"},\n"

 

                     else [[ "${key}" -eq "((${#port[@]}-1))" ]]

                          printf '\t {\n'

                          printf "\t\t\t\"{#CONTAINERNAME}\":\"${port[${key}]}\"}\n"

 

                       fi

               done

 

                          printf '\t ]\n'

                          printf '}\n'

}

case $1 in

docker)

docker

;;

*)

echo "Usage:`basename $0` {docker}"

;;

esac

把此文件存放到/usr/local/zabbix/bin里，然后给与755权限，并修改用户与组为zabbix，同时允许zabbix用户无密码运行docker

1

echo "zabbix ALL=(root) NOPASSWD:/bin/docker, /usr/local/zabbix/bin/zabbix_monitor_docker.py">>/etc/sudoers

D.重启zabbix服务

1

2

ps -ef|grep zabbix|grep -v grep|awk '{print $2}'|xargs kill -9

/usr/local/zabbix/sbin/zabbix_agentd -c /usr/local/zabbix/conf/zabbix_agentd.conf

3、服务端部署

A、模板导入

把Template Docker Auto Discovery导入到zabbix里（模板在附件），具体操作不介绍。

B.主机关联模板

把需要监控docker容器的主机管理模板即可监控，默认是60秒后自动更新，如下图

由于在zabbix里监控docker只是为了查看方便，所以报警就没有做，有需求可以自己来修改。

本文出自 “吟—技术交流” 博客，请务必保留此出处http://dl528888.blog.51cto.com/2382721/1660844