腾讯蓝鲸论坛-专业的技术交流论坛

 找回密码
 立即注册
忘了密码?
搜索
热搜: 用户手册 FAQ
查看: 2145|回复: 7

当Zabbix遇到故障自愈

[复制链接]

18

主题

0

好友

5271

积分

超级版主

Rank: 32Rank: 32

发表于 2017-9-25 15:02:36 |显示全部楼层
本帖最后由 huang'q 于 2017-9-25 15:31 编辑

当Zabbix遇到故障自愈

Zabbix用户的福音来了,通过对接蓝鲸智云的故障自愈,实现故障的无人值守。
0.jpg

对于Zabbix用户,故障自愈可以实现哪些功能呢?

18

主题

0

好友

5271

积分

超级版主

Rank: 32Rank: 32

发表于 2017-9-25 15:05:25 |显示全部楼层
本帖最后由 huang'q 于 2017-9-25 15:15 编辑

1."告警风暴"到底为止
"告警风暴"是Zabbix用户心中的痛。
一旦遇到网络波动、机房停电等情况告警根本停不下来,打爆你的手机。
有人甚至将Zabbix告警插入redis自己编写代码设定规则,来实现告警收敛。
如今,有了故障自愈,你不需要这样。
故障自愈拥有强大、可自助配置的收敛模块,轻松解决Zabbix的告警收敛。
1.jpg



1.1 网络出现异常时,收敛即是防护
当网络出现波动导致“假的Ping告警”产生时,可以在自愈里设定收敛规则,有效防护,而不是直接重启服务器。
1.1.jpg



1.2 相同处理方案的告警,成功后跳过
当进程告警 和 端口告警同时来袭,选择成功后跳过的收敛方式可以防止重复执行处理方案。
当然,自愈的收敛规则还有很多,等待你去配置。

1.2.jpg

18

主题

0

好友

5271

积分

超级版主

Rank: 32Rank: 32

发表于 2017-9-25 15:08:32 |显示全部楼层
本帖最后由 huang'q 于 2017-9-25 15:15 编辑

2. 故障处理作业自由定制
故障自愈的处理套餐当前在社区版V3.1 中有“分析CPU和内存使用率”、“磁盘清理”的快捷套餐,也有自己编写脚本的作业平台,以及最近一周即将推出的HTTP回调套餐(直接对接企业内部运维网关)


2.1 分析CPU和内存使用率
2.1.png



2.2 磁盘清理套餐
2.2.jpg



2.3 万能的作业平台
在作业平台里可以发挥你技高一筹的脚本编写能力,支持Shell、bat、Perl、Python、Powershell.

2.3.jpg




2.4 对接企业内部的运维网关
比如PING不可达后,你需要重启服务器

2.4.jpg

18

主题

0

好友

5271

积分

超级版主

Rank: 32Rank: 32

发表于 2017-9-25 15:10:30 |显示全部楼层
3.与CMDB联动,精准处理告警
故障自愈在清洗告警时,会从蓝鲸的配置平台(CMDB)中拉取告警IP的配置信息,与自愈方案做匹配。
实现不同模块,不同集群的告警精细化处理。

3.jpg

18

主题

0

好友

5271

积分

超级版主

Rank: 32Rank: 32

发表于 2017-9-25 15:13:44 |显示全部楼层
本帖最后由 huang'q 于 2017-9-25 15:17 编辑

4. 故障自愈集成Zabbix的方法

4.1 运行初始化脚本
4.1.jpg

就这么简单!
以下是原理,剖析给大家听听。


4.2 Zabbix是如何发送消息给故障自愈的
执行了4.1中的初始化脚本后,自愈会自动创建如下操作。
自动创建名为FTA_Act的Action
4.2.1.jpg


FTA_Act这个Action的Operation会通知FTA_Mgr用户,FTA_Mgr的通知媒介就是调用/usr/lib/zabbix/alertscripts/zabbix_fta_alarm.py
4.2.2.jpg


告警产生后在Action log中可以看到发给FTA_Act的Message
4.2.3.jpg



4.3 自愈集成Zabbix告警注意事项
自愈处理告警是把 {HOST.IP}作为故障主机IP,{ITEM.KEY}作为告警类型,请确保 {HOST.IP}在配置平台中注册,同时ITEM.KEY 能被你接入的告警类型所匹配。

上图的ITEM.KEY为 system.swap.size[,pfree]被下图的 Swap使用量(system.swap.*)的规则所匹配。
4.3.1.jpg


在/tmp/zabbix_fta_alarm.log 中可以查看到日志信息
4.3.2.jpg



18

主题

0

好友

5271

积分

超级版主

Rank: 32Rank: 32

发表于 2017-9-25 15:14:23 |显示全部楼层
5.故障自愈,不只是集成Zabbix 5.jpg


作为运维的你,还在等什么?释放双手的时候到了!

2

主题

0

好友

260

积分

预备会员

Rank: 1

发表于 2018-1-3 16:54:12 |显示全部楼层
咨询一下,故障自愈除了可以集成zabbix外,可以集成falcon 和nagios吗?

18

主题

0

好友

5271

积分

超级版主

Rank: 32Rank: 32

发表于 2018-1-4 10:29:26 |显示全部楼层
本帖最后由 huang'q 于 2018-1-4 10:30 编辑

支持的,下图是自愈支持的监控产品
QQ图片20180104102814.png

您需要登录后才可以回帖 登录 | 立即注册

蓝鲸官网

GMT+8, 2018-1-19 01:31

Powered by Discuz! X2.5

© 2001-2012 Comsenz Inc.

回顶部