monicazhang 发表于 2017-8-11 20:58:58

如何发现 Zabbix 的告警信息

身为OP,最怕发生的是什么?我想答案肯定会是,半夜突发紧急故障告警,而你却一觉到天亮吧。
   很多公司为了预防这种情况,会额外雇佣外包人员盯着监控系统,发现告警就立即打电话通知OP。显而易见,这能大大地减轻我们OP同学的工作压力,必要时还有个甩锅对象【奸笑】。不过这样仍有几个问题很难解决:
1、一般只负责看监控的外包人员往往不具备对故障级别的甄别能力;2、不同的问题到底该给谁打电话也经常一头雾水;3、外包人员现在的成本也不低呀。
那还有别的办法能实现一遇到重要告警就有人给我打电话,并且也会把告警内容一字不落的告诉我吗?下面教大家一招,让zabbix把告警信息读给你听!

实现这个效果貌似很简单,无非就是给你的zabbix配一个语音播报通知方式。这里先介绍一下常规的配置过程:
•      首先需要咨询不同的通道代理商,找出其中几家能提供语音播报服务的代理;•      挑选一些看起来靠谱的进行测试,从中选出拨通成功率最高的一家;•      与通道代理商经过一番讨价还价(如果一个月没有几万通的量,基本也用不着砍价,因为就算砍也砍不到好价钱),再签订合同,定期向其购买电话数量;•      在Zabbix配置语音调用接口,此处省略调用接口说明文档一千字;

啃下说明文档,大功告成!但单个通道的痛只有体会过会才会懂,你会发现你还需要:

•      配置多个主备语音通道,避免某个通道时不时的漏发或出现故障。此处再省略主备重发机制开发代码一千字;•      写几个检测脚本来定期检测通道是否正常;•      定期从通道代理商那边索取回执报告并作对比,以避免被“糊弄”;
看似简单的事情,如果用常规的方式实现起来却一点都不简单。我们工程师的时间都很宝贵,应该把这些时间用在更具创新、更有价值的工作上!
那么重点来了,现在有了灵犀,这些都是小case。我们把这些工作都集成到了灵犀中,通过使用灵犀,只要花几分钟,就可以实现把告警内容读出来。除此之外,灵犀还针对每个痛点都做了细致的优化,以提升用户的体验: 一、全语音播报,配置便捷,使用灵活
用户不需要自己配置语音接口,灵犀针对zabbix调用语音接口的动作进行了全流程封装,一键即可实现语音播报。同时,也不需要一签就是一年的合同,没有合同或时间限制,用多少,充多少;灵犀后台可直接查看用量统计,使用灵活性大大增强。点击这个音频,感受一下读出来的告警内容:
zabbix报警声




00:0000:10




Zabbix实现告警内容全语音播报后,不仅能起到叫醒的作用,而且不管你在家里睡,还是外面玩,一旦有告警,直接省去了打开电脑、查看邮件等步骤,通过电话就能知晓告警内容,直接判断出告警的重要程度。
二、五重主备通道,告警使命必达
通过我们的长期市场调研发现,即使在运营商网络和接听手机都正常的情况下,国内单个通道代理商的电话拨打成功率也只能在90%-95%左右。而在实际使用过程中,也会发生通道故障,通道拥堵等情况,实际拨打成功率常常只能达到80%左右。因此如果只使用一家通道代理商,那就意味着,每100通告警电话里,很可能只能拨通80通,而如果服务器宕机这样的严重告警,恰好在遗漏的那20通里,那导致的后果可想而知。如果想要提高告警电话拨打成功率,就必须同时使用多家通道代理商,保证即使有一两家通道代理商出现故障,还能有备用通道提供正常的语音服务。因此,灵犀整合了市场上服务最稳定的五家语音通道代理商,并在此基础之上,开发了严谨高效的主备机制。而最终我们实测得到的告警电话拨打成功率可达到99%以上!确保经由灵犀发送的几乎每一通告警电话,都能成功通知到运维人员。
三、自动抓取回执,告警透明可查
有的同学可能会觉得,99%这个数字没有意义,因为用户很难去验证。是的,在传统的zabbix电话通知方式中,用户是无法得知每一通告警电话是否拨通、是否接听的,更不用说查出无法拨通的原因了。在这种情况下,用户基本处于一种“抓瞎”的状态。所以一旦遗漏重要告警,值班运维人员可以说电话根本没响,轻松把锅丢给通道代理商,运维团队leader很难去确认责任人及责任原因。即使去找通道客服说理,客服也完全可以用一些接收电话关机、没信号等理由搪塞用户,把锅又丢回去。责任原因一次无法查明,很可能下次还会出现同样的问题。可以说这是一个很糟糕的用户体验。
因此针对每通告警电话,都能获取回执来得知该通电话拨打成功与否变得十分重要。灵犀的用户可以通过提供的使用界面或API接口,随时查询任意接收号码在任意时间段的回执状态。从不同的回执状态中不仅可以看出是否拨通、是否接听,若无法拨通,甚至还能查出导致无法拨通的原因:是因为手机号是空号、关机、还是信号问题等等。并且还可以在你想要的时间,自动获取回执周报邮件,详细罗列拨打成功和拨打失败号码清单,并直接给出当周拨打成功率。通过这些,可以轻松的查到每通告警电话的状态,让每一通告警电话都透明呈现在你眼前。原创人灵犀
页: [1]
查看完整版本: 如何发现 Zabbix 的告警信息