使用grafana4的alert功能

序

grafana 4版本以上支持了alert功能，这使得利用grafana作为监控面板更为完整，因为只有alert功能才能称得上监控。

万物docker

根据graphite_docker这个dockerfile来改造下，原本是grafana3的，现改为4版本：

修改grafana

在35行，改为获取grafana 4版本的包

# grafana
run     cd ~ &&\
    wget https://grafanarel.s3.amazonaws.com/builds/grafana_4.1.1-1484211277_amd64.deb &&\
        dpkg -i grafana_4.1.1-1484211277_amd64.deb && rm grafana_4.1.1-1484211277_amd64.deb

增加email配置(可选)

如果需要开启email alert的话，则需要在dockerfile把email的配置提前配置进去，具体在grafana/config.ini文件里头，新增email配置即可。

notification配置

email

email是比较传统的告警渠道，不过在使用docker版的grafana，需要提前配置下stmp的配置，否则会报错(/var/log/grafana/grafana.log)：

t=2017-01-29T07:34:35+0000 lvl=eror msg="Failed to send alert notification email" logger=alerting.notifier.email error="Grafana mailing/smtp options not configured, contact your Grafana admin"

配置模板如下:

#################################### SMTP / Emailing ##########################
[smtp]
enabled = true
host = smtp.126.com:25
user = xxxxxx
password = xxxxx
;cert_file =
;key_file =
skip_verify = true
from_address = xxxxxx@126.com

[emails]
;welcome_email_on_sign_up = false

顺带开启下alert配置

#################################### Alerting ######################################
[alerting]
# Makes it possible to turn off alert rule execution.
execute_alerts = true

测试一下：
图片描述

发送不成功的时候，记得去/var/log/grafana/grafana.log看下有没有错误日记，好进行排查。

slack

使用slack的话，那就更简单了，不需要在启动之前准备好配置项，只需要在界面上直接配置incoming webhook就可以了，非常适合docker版的grafana：
图片描述

alert

在每个graph的tab里头有个alert标签，里头可以配置：
图片描述

记得添加下notifications就是，然后就大功告成了。
图片描述