AlertManager 配置邮箱告警

1$ vi /etc/alertmanager/email.tmpl

 1{{ define "email.to" }}xxxxxx@163.com{{ end }}
 2{{ define "email.title" }}来自超级小豆丁的测试告警{{ end }}
 3{{ define "email.to.html" }}
 4{{ range .Alerts }}
 5<p>==========<strong>告警通知</strong>==========</p>
 6<strong>告警程序:</strong> prometheus_alert<br>
 7<strong>告警级别:</strong> {{ .Labels.severity }}<br>
 8<strong>告警类型:</strong> {{ .Labels.alertname }}<br>
 9<strong>告警实例:</strong> {{ .Labels.instance }}<br>
10<strong>告警信息:</strong> {{ .Annotations.summary }}<br>
11<strong>告警描述:</strong> {{ .Annotations.description }}<br>
12<strong>当前状态:</strong> {{ .Status }}<br>
13<strong>触发时间:</strong> {{ .StartsAt.Format "2006-01-02 15:04:05" }}<br>
14<strong>监控界面地址:</strong> <a href="{{ .GeneratorURL }}">点击跳转</a><br>
15{{ end }}
16{{ end }}

 1# 全局配置
 2global:
 3  ## 在没有报警的情况下声明为已解决的时间
 4  resolve_timeout: 5m
 5  ## ===配置邮箱===
 6  ## 配置邮箱 SMTP 服务器地址和端口；
 7  smtp_smarthost: 'smtp.163.com:25'
 8  ## 配置发件人邮箱
 9  smtp_from: 'xxxxxx@163.com'
10  ## 配置发件人邮箱账户
11  smtp_auth_username: 'xxxxxx@163.com'
12  ## 配置发件人邮箱密码 (这里指的是邮箱授权码，不是登录密码)
13  smtp_auth_password: 'ABCDEFG***'
14  ## 配置是否使用 TLS 加密
15  smtp_require_tls: false
16
17# 自定义邮件通知模板
18templates:
19  - '/etc/alertmanager/*.tmpl'
20
21# 告警路由配置
22route:
23  ## 配置用于分组的标签
24  group_by: ['alertname', 'cluster']
25  ## 配置同一组告警等待时间。
26  ## 用于配置接收到某组中的告警信息后，并不会立即发出告警信息，
27  ## 而是等待指定时间，如果有相同组的告警信息，则一起发送告警
28  group_wait: 30s
29  ## 两组告警的间隔时间
30  group_interval: 10m
31  ## 重复告警的间隔时间，减少相同邮件的发送频率。
32  ## 如果一个报警信息已经发送成功了，等待 repeat_interval 时间来重新发送他们
33  ## 但是如果告警在 resolve_timeout 时间内没有重复发送，表示问题已经解决，则
34  ## 到 repeat_interval 时间后就不会重新发送
35  repeat_interval: 30m
36  ## 配置默认接收者，如果一个报警没有被一个 route 匹配，则发送给默认的接收器
37  receiver: 'email'
38  ## 配置指定组的消息由对应哪个接收者进行处理
39  routes:
40  - receiver: 'email'
41    group_wait: 30s
42    ### 配置匹配标签，只有匹配的标签才会使用当前配置中指定的接收者进行处理
43    match:
44      alertname: email-test
45
46# 告警接收者配置(大部分参数值都是引入模板中定义的变量)
47receivers:
48- name: 'email'
49  email_configs:
50    ## 设置接收告警的邮箱，这里既可以直接写接收者邮箱，也可以引入模板中定义的变量
51  - to: '{{ template "email.to" }}'
52    ## 设置邮箱标题
53    headers: { Subject: '{{ template "email.title" }}【告警状态: {{ .Status }}】' }
54    ## 设置邮箱内容
55    html: '{{ template "email.to.html" .}}'
56    ## 是否通知已解决的告警
57    send_resolved: true

1$ curl -XPOST http://192.168.2.11:30903/-/reload

 1data='[
 2  {
 3    "labels": {
 4      "alertname": "alert-test",
 5      "instance": "test-service",
 6      "job": "test-job",
 7      "severity": "page"
 8    },
 9    "annotations": {
10      "summary": "测试一下",
11      "description": "测试告警邮件."
12    },
13    "generatorURL": "http://www.mydlq.club"
14  }
15]'

1$ curl -H "Content-Type:application/json" \
2  -X POST \
3  -d "$data" \
4  http://192.168.2.11:30903/api/v2/alerts

1$ vi /etc/prometheus/email-rules.yaml

 1## 告警规则配置如下，其中告警条件 up > -1 是必然满足的，
 2## 必定会触发 Prometheus 告警状态为 Firing。
 3groups:
 4- name: Instances
 5  rules:
 6  - alert: InstanceDown
 7    expr: up > -1
 8    for: 1m
 9    labels:
10      severity: page
11      ## 配置用于分组的标签
12      alertname: email-test
13    annotations:
14      description: '{{ $labels.instance }} 实例的 {{ $labels.job }} 任务宕机已经超过 1 分钟.'
15      summary: '实例 {{ $labels.instance }} 宕机'

1############ 添加配置 AlertManager 服务器地址 ###################
2alerting:
3  alertmanagers:
4  - static_configs:
5    - targets: ["http://192.168.2.11:30903"] 
6
7############ 指定告警规则文件路径位置 ###################
8rule_files:
9- /etc/prometheus/*-rule.yml

1$ curl -XPOST http://192.168.2.11:30900/-/reload