以下是各种不同的告警示例以及相应的 Alertmanager 配置文件设置(alertmanager.yml)。每个示例都使用了 Go 模板系统。
自定义 Slack 通知
在此示例中,我们自定义了 Slack 通知,使其发送一个链接到我们组织的 Wiki 页面的 URL,该页面描述了如何处理已发送的特定告警。
global:
# Also possible to place this URL in a file.
# Ex: `slack_api_url_file: '/etc/alertmanager/slack_url'`
slack_api_url: '<slack_webhook_url>'
route:
receiver: 'slack-notifications'
group_by: [alertname, datacenter, app]
receivers:
- name: 'slack-notifications'
slack_configs:
- channel: '#alerts'
text: 'https://internal.myorg.net/wiki/alerts/{{ .GroupLabels.app }}/{{ .GroupLabels.alertname }}'
访问 CommonAnnotations 中的注解
在此示例中,我们再次自定义发送到 Slack 接收器的文本,访问 Alertmanager 发送的数据中 CommonAnnotations 里存储的 summary 和 description。
告警
groups:
- name: Instances
rules:
- alert: InstanceDown
expr: up == 0
for: 5m
labels:
severity: page
# Prometheus templates apply here in the annotation and label fields of the alert.
annotations:
description: '{{ $labels.instance }} of job {{ $labels.job }} has been down for more than 5 minutes.'
summary: 'Instance {{ $labels.instance }} down'
接收器
- name: 'team-x'
slack_configs:
- channel: '#alerts'
# Alertmanager templates apply here.
text: "<!channel> \nsummary: {{ .CommonAnnotations.summary }}\ndescription: {{ .CommonAnnotations.description }}"
遍历所有接收到的告警
最后,假设使用与上一个示例相同的告警,我们自定义接收器以遍历从 Alertmanager 接收到的所有告警,在新行上打印它们各自的注解摘要和描述。
接收器
- name: 'default-receiver'
slack_configs:
- channel: '#alerts'
title: "{{ range .Alerts }}{{ .Annotations.summary }}\n{{ end }}"
text: "{{ range .Alerts }}{{ .Annotations.description }}\n{{ end }}"
定义可复用的模板
回到我们的第一个示例,我们也可以提供一个包含命名模板的文件,然后由 Alertmanager 加载,以避免跨越多行的复杂模板。在 /alertmanager/template/myorg.tmpl 下创建一个文件,并在其中创建一个名为 "slack.myorg.text" 的模板:
{{ define "slack.myorg.text" }}https://internal.myorg.net/wiki/alerts/{{ .GroupLabels.app }}/{{ .GroupLabels.alertname }}{{ end}}
配置现在会为 "text" 字段加载给定名称的模板,并且我们提供了自定义模板文件的路径:
global:
slack_api_url: '<slack_webhook_url>'
route:
receiver: 'slack-notifications'
group_by: [alertname, datacenter, app]
receivers:
- name: 'slack-notifications'
slack_configs:
- channel: '#alerts'
text: '{{ template "slack.myorg.text" . }}'
templates:
- '/etc/alertmanager/templates/myorg.tmpl'
此示例在这篇博客文章中有更详细的解释。