Zabbix监控告警系统

第一章 Zabbix 入门

1.1 Zabbix 概述

Zabbix 是一款能够监控各种网络参数以及服务器健康性和完整性的软件。Zabbix 使用灵活的通知机制，允许用户为几乎任何事件配置基于邮件的告警，这样可以快速反馈服务器的问题。基于已存储的数据，Zabbix 提供了出色的报告和数据可视化功能。Zabbix 支持轮询和被动捕获。基于 Web 的前端页面确保您的网络状态和服务器健康状况可以从任何地方进行评估。在经过适当的配置后，Zabbix 可以在监控 IT 基础设施方面发挥重要作用。无论是对于拥有少量服务器的小型组织，还是拥有大量服务器的大型公司而言，同样适用。

1.2 Zabbix 基础架构

核心组件主要是Agent 和Server，其中Agent 主要负责采集数据并通过主动或者被动的方式采集数据发送到Server/Proxy，除此之外，为了扩展监控项，Agent 还支持执行自定义脚本。Server 主要负责接收Agent 发送的监控信息，并进行汇总存储，触发告警等。ZabbixServer 将收集的监控数据存储到Zabbix Database 中。Zabbix Database 支持常用的关系型数据库，如果MySQL、PostgreSQL、Oracle 等，默认是MySQL，并提供Zabbix Web页面（PHP 编写）数据查询。

1.3 Zabbix 和Prometheus

综合比对：

如上面的表格，从开发语言上看，为了应对高并发和快速迭代的需求，监控系统的开发语言已经慢慢从C语言转移到Go。不得不说，Go凭借简洁的语法和优雅的并发，在Java占据业务开发，C占领底层开发的情况下，准确定位中间件开发需求，在当前开源中间件产品中被广泛应用。从系统成熟度上看，Zabbix是老牌的监控系统：Zabbix是在1998年就出现的，系统功能比较稳定，成熟度较高。而Prometheus是最近几年才诞生的，虽然功能还在不断迭代更新，但站在巨人的肩膀之上，在架构设计上借鉴了很多老牌监控系统的经验；从数据存储方面来看，Zabbix采用关系数据库保存，这极大限制了Zabbix采集的性能，而Prometheus自研一套高性能的时序数据库，在V3版本可以达到每秒千万级别的数据存储，通过对接第三方时序数据库扩展历史数据的存储；从配置复杂度上看，Prometheus只有一个核心server组件，一条命令便可以启动，相比而言，其他系统配置相对麻烦；从社区活跃度上看，目前Zabbix比较活跃，但基本都是国内的公司参与，Prometheus在这方面占据绝对优势，社区活跃度虽然不如，但是受到CNCF的支持，后期的发展值得期待；从容器支持角度看，由于Zabbix出现得比较早，当时容器还没有诞生，自然对容器的支持也比较差。而Prometheus的动态发现机制，不仅可以支持swarm原生集群，还支持Kubernetes容器集群的监控，是目前容器监控最好解决方案。

结论：

如果监控的是物理机，用 Zabbix，Zabbix在传统监控系统中，尤其是在服务器相关监控方面，占据绝对优势。甚至环境变动不会很频繁的情况下，Zabbix 也会比 Prometheus 好使；但如果是云环境的话，除非是 Zabbix 玩的非常溜，可以做各种定制，否则还是 Prometheus 吧，毕竟人家就是干这个的。Prometheus开始成为主导及容器监控方面的标配，并且在未来可见的时间内被广泛应用。如果是刚刚要上监控系统的话，不用犹豫了，Prometheus 准没错

第二章 Zabbix部署

2.1 集群规划

进程	hadoop102节点	hadoop103节点	hadoop104节点
zabbix-agent	√	√	√
zabbix-server	√
MySQL	√
zabbix-web	√

2.2 准备工作

2.2.1 关闭集群

如果集群开启，先关闭集群。因为安装Zabbix前，需要重启虚拟机。

2.2.2 关闭 3 台节点防火墙

分别在 102 、 103 和 104 上执行

sudo systemctl stop firewalld.service
sudo systemctl disable firewalld.service

2.2.3 关闭 3 台节点上的 SELinux

1）修改配置文件/etc/selinux/config

sudo vim /etc/selinux/config

修改如下内容

# This file controls the state of SELinux on the system.
# SELINUX= can take one of these three values:
#     enforcing - SELinux security policy is enforced.
#     permissive - SELinux prints warnings instead of enforcing.
#     disabled - No SELinux policy is loaded.
SELINUX=disabled
# SELINUXTYPE= can take one of three two values:
#     targeted - Targeted processes are protected,
#     minimum - Modification of targeted policy. Only selected processes are protected. 
#     mls - Multi Level Security protection.
SELINUXTYPE=targeted

2）重启服务器

[atguigu@hadoop102 ~]$ sudo reboot

2.3 配置 3 台节点 的 Zabbix yum 源

2.3.1 安装 yum 仓库

1. 安装 zabbix 的 软件 仓库 配置包

这个包包含了 yum（软件包管理器）的配置文件。

[wkf@hadoop102 ~]$ sudo rpm -Uvh https://mirrors.aliyun.com/zabbix/zabbix/5.0/rhel/7/x86_64/zabbix-release-5.0-1.el7.noarch.rpm

[wkf@hadoop103 ~]$ sudo rpm -Uvh https://mirrors.aliyun.com/zabbix/zabbix/5.0/rhel/7/x86_64/zabbix-release-5.0-1.el7.noarch.rpm

[wkf@hadoop104 ~]$ sudo rpm -Uvh https://mirrors.aliyun.com/zabbix/zabbix/5.0/rhel/7/x86_64/zabbix-release-5.0-1.el7.noarch.rpm

2. 安装 Software Collections 仓库

[wkf@hadoop102 ~]$ sudo yum install -y centos-release-scl

2.3.2 修改 zabbix 仓库配置文件

hadoop102、hadoop103、hadoop104三台节点，依次执行如下步骤。

1. 查看原始 zabbix. repo 文件

sudo cat /etc/yum.repos.d/zabbix.repo

查看内容如下

[wkf@hadoop102 ~]$ sudo cat /etc/yum.repos.d/zabbix.repo
[zabbix]
name=Zabbix Official Repository - $basearch
baseurl=http://repo.zabbix.com/zabbix/5.0/rhel/7/$basearch/
enabled=1
gpgcheck=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591

[zabbix-frontend]
name=Zabbix Official Repository frontend - $basearch
baseurl=http://repo.zabbix.com/zabbix/5.0/rhel/7/$basearch/frontend
enabled=0
gpgcheck=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591

[zabbix-debuginfo]
name=Zabbix Official Repository debuginfo - $basearch
baseurl=http://repo.zabbix.com/zabbix/5.0/rhel/7/$basearch/debuginfo/
enabled=0
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591
gpgcheck=1

[zabbix-non-supported]
name=Zabbix Official Repository non-supported - $basearch
baseurl=http://repo.zabbix.com/non-supported/rhel/7/$basearch/
enabled=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX
gpgcheck=1

2. 执行以下命令完成全局替换 修改为阿里云镜像

[wkf@hadoop102 ~]$ sudo sed -i 's/http:\/\/repo.zabbix.com/https:\/\/mirrors.aliyun.com\/zabbix/g' /etc/yum.repos.d/zabbix.repo

3. 查看修改之后的 zabbix .repo 文件

[wkf@hadoop102 ~]$ sudo cat /etc/yum.repos.d/zabbix.repo
[zabbix]
name=Zabbix Official Repository - $basearch
baseurl=https://mirrors.aliyun.com/zabbix/5.0/rhel/7/$basearch/
enabled=1
gpgcheck=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591

[zabbix-frontend]
name=Zabbix Official Repository frontend - $basearch
baseurl=https://mirrors.aliyun.com/zabbix/5.0/rhel/7/$basearch/frontend
enabled=0
gpgcheck=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591

[zabbix-debuginfo]
name=Zabbix Official Repository debuginfo - $basearch
baseurl=https://mirrors.aliyun.com/zabbix/5.0/rhel/7/$basearch/debuginfo/
enabled=0
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591
gpgcheck=1

[zabbix-non-supported]
name=Zabbix Official Repository non-supported - $basearch
baseurl=https://mirrors.aliyun.com/non-supported/rhel/7/$basearch/
enabled=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX
gpgcheck=1

4. 打开 /etc/ repos .d zabbix.repo 文件， 启用 zabbix web 仓库

sudo vim /etc/yum.repos.d/zabbix.repo

2.4 安装 Zabbix

在hadoop102、hadoop103、hadoop104三台节点分别执行以下安装命令

[wkf@hadoop102 ~]$ sudo yum install -y zabbix-server-mysql zabbix-agent zabbix-web-mysql-scl zabbix-apache-conf-scl

[wkf@hadoop103 ~]$ sudo yum install -y zabbix-agent

[wkf@hadoop104 ~]$ sudo yum install -y zabbix-agent

2.5 配置 Zabbix

2.5.1 创建 zabbix 数据库

mysql -uroot -p123456 -e"create database zabbix character set utf8 collate utf8_bin"

2.5.2 导入 Z abbix 建表语句

zcat /usr/share/doc/zabbix-server-mysql-5.0.22/create.sql.gz | mysql -uroot -p123456 zabbix

2.5.3 配置 Zabbix_ Server (hadoop102)

修改zabbix-server配置文件

sudo vim /etc/zabbix/zabbix_server.conf

DBHost=hadoop102
DBName=zabbix
DBUser=root
DBPassword= 123456

2.5.4 配置 Zabbix Agent （三台节点）

修改zabbix-agent配置文件

sudo vim /etc/zabbix/zabbix_agentd.conf

修改如下内容：

Server=hadoop102
#ServerActive=127.0.0. 1
#Hostname=Zabbix server

2.5.5 配置 Zabbix Web 时区（hadoop102）

修改/etc/opt/rh/rh-php72/php-fpm.d/zabbix.conf文件

sudo vim /etc/opt/rh/rh-php72/php-fpm.d/zabbix.conf

修改如下内容：

php_value[date.timezone] = Asia/Shanghai

2.6 启动停止 Zabbix

2.6.1 启动 Zabbix

[wkf@hadoop102 ~]$ sudo systemctl start zabbix-server zabbix-agent httpd rh-php72-php-fpm

[wkf@hadoop102 ~]$  sudo systemctl enable zabbix-server zabbix-agent httpd rh-php72-php-fpm

[wkf@hadoop103 ~]$ sudo systemctl start zabbix-agent

[wkf@hadoop103 ~]$ sudo systemctl enable zabbix-agent

[wkf@hadoop104 ~]$ sudo systemctl start zabbix-agent

[wkf@hadoop104 ~]$ sudo systemctl enable zabbix-agent

2.6.2 停止 Zabbix

[wkf@hadoop102 ~]$ sudo systemctl stop zabbix-server zabbix-agent httpd rh-php72-php-fpm

[wkf@hadoop102 ~]$  sudo systemctl disable zabbix-server zabbix-agent httpd rh-php72-php-fpm

[wkf@hadoop103 ~]$ sudo systemctl stop zabbix-agent

[wkf@hadoop103 ~]$ sudo systemctl disable zabbix-agent

[wkf@hadoop104 ~]$ sudo systemctl stop zabbix-agent

[wkf@hadoop104 ~]$ sudo systemctl disable zabbix-agent

2.6.3 连接 Zabbix_ Web 数据库

1. 浏览器访问 http://hadoop102/zabbix

2. 检查配置

3. 配置数据库

   

4. 配置 zabbix server

2.6.4 登录 Zabbix

1. 用户名： Admin 密码： zabbix

2. 点击 User Settings ，语言设成中文

   

注意：这里默认会对Zabbix Server进行监控，但是我们可以看到目前该主机是红色，不可用的状态，原因是主机的地址不能使用127.0.0.1需要后续我们单独配置。

第三章 Zabbix使用

3.1 Zabbix 术语

3.1.1 主机（ Host ）

一台你想监控的网络设备，用IP或域名表示。

3.1.2 监控项（ Item ）

你想要接收的主机的特定数据，一个度量数据。

3.1.3 触发器（ Trigger ）

一个被用于定义问题阈值和“评估”监控项接收到的数据的逻辑表达式。

3.1.4 动作（ Action ）

一个对事件做出反应的预定义的操作，比如邮件通知。

3.2 Zabbix 实战

这里我们以监控Hdfs集群为例，给大家进行演示，所以首先先执行start-dfs.sh，启动HDFS

3.2.1 创建 Host

1. 点击 配置/主机/创建主机

1. 配置主机（ Host ）
2. 查看新增（ Host ）

1. 重复以上步骤，再创建 hadoop 103 、 hadoop 104 主机。

3.2.2 创建 监控项（ Items )

1. 点击 监控项（ Items )

2. 点击创建监控项（ Create Item ）

3. 配置监控项（ Item ）

4. 查看创建的监控项
5. 查看监控项最新数据

3.2.3 创建触发器（ Trigger ）

1. 点击 配置/主机/触发器

2. 点击创建触发器
3. 编辑触发器

3.2.4 创建动作（ Action ）

1. 点击 配置/动作/创建动作

2. 编辑动作（ Action )

定义操作

3.2.5 申请邮箱

邮件报警，可以采用126、163、qq等邮箱。下面以qq邮箱为例。

点击邮箱设置/账户

开启 SMTP 服务

要发送短信认证

记住授权码

3.2.6 创建报警媒介类型（ Media type ）

1. 点击 管理/报警媒介类型/Email

2. 编辑 Email ，这里配置的 email 用于发送报警邮件。

3. 测试 Email

3.2.7 给动作中配置的 用户 配置 Email

3.2.8 测试

1. 关闭集群中的 HDFS ，会有如下效果
2. 查看仪表盘故障信息

3. 查看邮件，接收故障信息

3.3 创建模板

模板是可以方便地应用于多个主机的一组实体。 实体可以是监控项、触发器、图形、应用、web场景等。由于生产上的许多主机是相同或类似的，所以，为一个主机创建的一组实体（项目，触发器，图形，...）可能对其它主机也适用。当然，你可以将它们复制到每个新的主机上，但需要费很大功夫。相反，使用模板，可以将它们复制到一个模板，然后根据需要将模板应用于尽可能多的主机。因此，使用模板是减少工作量并简化Zabbix配置的好方法。

另外，使用模板还有一个好处是当所有主机都需要更改时，只需要在模板上更改某些内容将会将更改应用到所有链接的主机。

3.3.1 点击配置/模板/创建模板

3.3.2 配置模板名称/群组

3.3.3 配置监控项

3.3.4 配置触发器

3.3.5 配置动作

添加模板触发条件

3.3.6 为 hadoop 103 应用模板

3.3.7 为 hadoop 104 应用模板

同上

3.3.8 测试

启动 hadoop 集群

停止 hadoop 集群

查看报警邮件

收到来自三台主机的报警邮件