|
|
### 基于Zabbix 6.0监控系统实现智能运维演示系统
|
|
|
|
|
|
该项目采用Zabbix 6.0对主机和服务器进行监控,并根据监控数据设置触发器,从而实现异常检测并设立多种报警方式,包括QQ邮箱报警、企业微信报警和钉钉报警等多种方式。从监控,到异常检测告警,针对压缩后告警进行根因分析,并结合知识图谱(开源模型)指导行动和修复故障。
|
|
|
|
|
|
告警时,项目基于CPU负荷、内存使用、磁盘使用、网络状况、端口和日志相关指标设立下列触发器,包括:
|
|
|
|
|
|
1. **阈值警报触发器:** 触发器用于监控上述指标的值,一旦该值超过或低于设定的阈值,就触发警报。例如,CPU使用率超过90%。
|
|
|
2. **异常检测触发器:** 触发器用于检测异常情况,如服务器离线、服务崩溃等,一旦发现异常,即可触发警报。
|
|
|
3. **性能指标监控触发器:** 触发器用于监控性能指标,如响应时间、延迟等,以确保系统处于良好状态。
|
|
|
4. **多个条件组合触发器:** 触发器基于多个监控项的组合条件。例如,当CPU使用率超过90%并且内存使用率超过80%时触发警报。
|
|
|
5. **持续监控触发器:** 触发器通常有一个延迟时间,只有在一定时间范围内满足条件才会触发警报,以避免误报。
|
|
|
|
|
|
处理异常时,项目根据大量故障及其对应原因的带标签数据,运用知识图谱强大的逻推理能力,实现对异常原因的分析,并进一步生成告警信息,辅助运维人员对系统实时不间断调控。
|
|
|
|
|
|
#### Zabbix介绍
|
|
|
|
|
|
Zabbix是一款开源的网络监控和报警系统,用于监视各种网络设备、服务器和应用程序的健康状态和性能。它能够收集各种指标和数据,如CPU使用率、内存使用率、网络流量等,然后将这些数据用于生成报表、图表和警报,以帮助管理员和运维团队及时发现和解决问题。
|
|
|
|
|
|
Zabbix具有以下主要特点:
|
|
|
|
|
|
1. **多种监控方式:** Zabbix支持多种监控方式,包括代理式、被动式和主动式监控,能够适应不同网络架构和需求。
|
|
|
2. **灵活的报警系统:** Zabbix可以根据预设的阈值和条件生成报警,管理员可以通过电子邮件、短信等方式接收警报。
|
|
|
3. **数据收集和图表展示:** Zabbix能够收集大量的性能指标和数据,然后将这些数据以图表和报表的形式展示,帮助管理员分析趋势和问题。
|
|
|
4. **自定义监控项:** 用户可以根据需要定义自己的监控项,以监视特定的应用程序、服务或指标。
|
|
|
5. **自动发现功能:** Zabbix可以自动发现网络上的设备和服务,简化了添加新设备到监控系统中的过程。
|
|
|
6. **可扩展性:** Zabbix支持插件和扩展,允许用户根据需要定制和扩展功能。
|
|
|
|
|
|
Zabbix 由几个主要的功能组件组成,分别是:
|
|
|
|
|
|
1. **Zabbix Server:**是整个监控系统的核心组件。它负责收集、存储、处理和显示监控数据。以下是Zabbix Server的主要功能:
|
|
|
- 数据收集和存储: Zabbix Server通过与Zabbix Agents、SNMP设备和其他数据源通信,收集各种性能指标和数据,如CPU使用率、内存使用率、网络流量等。
|
|
|
- 数据处理和分析: 收集的数据被Zabbix Server分析和处理,以便生成图表、报表、趋势和警报。管理员可以使用这些数据来监视系统的健康状态和性能。
|
|
|
- 警报生成和管理: 基于预定义的阈值和条件,Zabbix Server可以生成警报,通知管理员和运维人员存在问题。这可以通过电子邮件、短信等多种方式实现。
|
|
|
- 图表和可视化: Zabbix Server提供了可视化工具,管理员可以创建自定义图表和报表,以便更好地理解和分析监控数据。
|
|
|
- 自动发现和管理: Zabbix Server支持自动发现网络设备和服务,从而简化了添加新设备到监控系统中的流程。
|
|
|
2. **Zabbix Agent:** Zabbix Agent是安装在需要监控的目标主机上的代理程序。它负责收集本地性能数据并将其发送给Zabbix Server。以下是Zabbix Agent的主要功能:
|
|
|
- 数据采集: Zabbix Agent在本地收集主机的性能数据,如CPU利用率、内存使用率、磁盘空间等。
|
|
|
- 数据传输: 收集到的数据通过Zabbix Agent传输到Zabbix Server,供后者分析和处理。
|
|
|
- 低资源消耗: Zabbix Agent被设计为低资源消耗,对目标主机的影响较小。
|
|
|
- 主动和被动监控: Zabbix Agent支持主动模式和被动模式。在主动模式下,Agent定期向Server发送数据;在被动模式下,Server请求Agent发送数据。
|
|
|
- 自定义监控项: 可以在Zabbix Agent上配置自定义的监控项,以满足特定的监控需求。
|
|
|
3. **Zabbix proxy:**Zabbix Proxy是Zabbix监控系统中的另一个重要组件,用于增强系统的性能和扩展性。如果网络被分割成多个不同的子网,每个子网都有一个Proxy可以收集数据并将其汇总到中央Server。与Zabbix server相比:
|
|
|
* **数据处理:** Zabbix Proxy负责缓存和汇总数据,而Zabbix Server负责数据的分析、处理和显示。Proxy不执行警报生成等高级任务,这些任务由Zabbix Server处理。
|
|
|
* **位置和作用:** Zabbix Proxy通常放置在分布式网络的边缘,负责从监控目标收集数据并将其传输到Zabbix Server。Zabbix Server则集中管理整个监控系统。
|
|
|
* **数据传输:** Proxy使用主动模式将数据发送给Server,而Server使用被动模式接收来自Proxy的数据请求。这种通信方式允许Proxy在网络隔离或安全性环境中工作。
|
|
|
* **功能:** Zabbix Server具有更强大的功能,包括警报、报表、可视化等。Proxy主要负责数据收集和转发。
|
|
|
* **扩展性:** Zabbix Proxy允许在大规模和分布式环境中进行扩展,通过将任务分发到多个Proxy来提高性能。Zabbix Server则是监控系统的核心,不同的Proxy可以协同工作以支持更大规模的监控。
|
|
|
|
|
|
#### 演示系统简介
|
|
|
|
|
|
以监控nginx服务的终止和重启并向**企业微信**提出告警为例
|
|
|
|
|
|
1. 下图可以看到nginx服务终止,并在运维人员恢复后重启的过程:
|
|
|
|
|
|
<img src="C:\Users\hxy\AppData\Local\Temp\WeChat Files\389217b5f67882e0b8336f6c918aeae.png" alt="389217b5f67882e0b8336f6c918aeae" style="zoom:60%;" />
|
|
|
|
|
|
2. 下图可以看到企业微信收到了nginx服务终止的告警以及运维人员恢复后的提示:
|
|
|
|
|
|
<img src="C:\Users\hxy\AppData\Local\Temp\WeChat Files\ef11ab30a38e2e87a0b4339b7973b19.jpg" alt="ef11ab30a38e2e87a0b4339b7973b19" style="zoom:25%;" />
|
|
|
|
|
|
<img src="C:\Users\hxy\AppData\Local\Temp\WeChat Files\5bd607b5d264b541d87273de20e6d8d.jpg" alt="5bd607b5d264b541d87273de20e6d8d" style="zoom:25%;" />
|
|
|
|
|
|
检测的CPU使用率如下,超过10%会告警。受篇幅原因不展示告警信息:
|
|
|
|
|
|
<img src="C:\Users\hxy\AppData\Local\Temp\WeChat Files\2da4919f3336047f11e1859c6e16eee.png" alt="2da4919f3336047f11e1859c6e16eee" style="zoom:60%;" />
|
|
|
|
|
|
检测的网络带宽速率如下,超过400bps会告警。受篇幅原因不展示告警信息:
|
|
|
|
|
|
<img src="C:\Users\hxy\AppData\Local\Temp\WeChat Files\498738aad1c27901565ded0ec35837e.png" alt="498738aad1c27901565ded0ec35837e" style="zoom:60%;" />
|
|
|
|
|
|
检测的内存使用率如下,超过50%会告警。受篇幅原因不展示告警信息:
|
|
|
|
|
|
<img src="C:\Users\hxy\AppData\Local\Temp\WeChat Files\755cdb0399dfe0457104a560b3ac92f.png" alt="755cdb0399dfe0457104a560b3ac92f" style="zoom:60%;" />
|
|
|
|
|
|
检测的硬盘使用率如下,超过50%会告警。受篇幅原因不展示告警信息:
|
|
|
|
|
|
<img src="C:\Users\hxy\AppData\Local\Temp\WeChat Files\dde6505aafb4c8db5575f54a50dc77e.png" alt="dde6505aafb4c8db5575f54a50dc77e" style="zoom:60%;" />
|
|
|
|
|
|
#### 在小组实验过程中,有很多有意思的现象:
|
|
|
|
|
|
1. Zabbix Server与Zabbix Agent在不同网段,在Server端连接时,会因为网络波动,造成时而连接时而连接不了的情况,容易形成波动较大数据。
|
|
|
2. VMware虚拟机网段与主机网段不一致,但可以通过主机IP地址进行不同地址Zabbix Server与Zabbix Agent进行通信。
|