[Unit]
Description=Prometheus alertmanager
Documentation=https://github.com/prometheus/alertmanager

[Service]
Restart=always
User=root
ExecStart=/monitor/alertmanager/alertmanager --config.file=/monitor/alertmanager/alertmanager.yml
ExecReload=/bin/kill -HUP $MAINPID
TimeoutStopSec=20s
SendSIGKILL=no

[Install]
WantedBy=multi-user.target

alerting:
  alertmanagers:
  - static_configs:
    - targets:
      - alertmanager1:9093
      - alertmanager2:9093
      - alertmanager3:9093

global:
  # 发件方邮箱地址
  [ smtp_from: <tmpl_string> ]
  # 邮件服务商提供的邮件服务器地址和端口，端口只能是25或基于TLS的587
  [ smtp_smarthost: <string> ]
  # 要向SMTP服务器标识的默认主机名，默认localhost
  [ smtp_hello: <string> | default = "localhost" ]
  # 发件方邮箱对应的账号
  [ smtp_auth_username: <string> ]
  # 发件方邮箱对应账号的密码
  [ smtp_auth_password: <secret> ]
  # SMTP Auth using LOGIN and PLAIN.
  [ smtp_auth_password_file: <string> ]
  # SMTP Auth using PLAIN.
  [ smtp_auth_identity: <string> ]
  # SMTP Auth using CRAM-MD5.
  [ smtp_auth_secret: <secret> ]
  # 是否使用使用tls加密，默认true
  [ smtp_require_tls: <bool> | default = true ]

global:
  smtp_smarthost: 'smtp.qq.com:587'
  smtp_from: '767483070@qq.com'
  smtp_auth_username: '767483070@qq.com'
  smtp_auth_password: 'dfzjyeyveaotbbhb'
  smtp_hello: '@qq.com'

global:
  smtp_smarthost: 'smtp.163.com:25'
  smtp_from: 'sredevops@163.com'
  smtp_auth_username: 'sredevops@163.com'
  smtp_auth_password: 'CNPQGQWTVKVPBWPA'
  smtp_hello: '@163.com'

global:
  wechat_api_url: "https://qyapi.weixin.qq.com/cgi-bin/" # 微信提供的api地址
  wechat_api_corp_id: "ww2e2992779dc200a5" # 企业ID（登录企业微信后，我的企业 --> 企业信息 --> 企业ID）
  wechat_api_secret: "_GyZlVTPC6UIvt15Q4RpbHdAAQkAFlPLP1VlLODHJvQ" # 自定义应用应用的密钥（登录企业微信后，应用管理 --> 自建应用 --> Secret）

route: # 设置警报路由规则
  group_by: ['alertname', 'cluster', 'service']  # 按照指定的标签对警报进行分组，用于定义如何对警报进行分组的标签列表。这些标签将用于分组警报以便进行合并、抑制等操作。
                                                                     # 分组时使用的标签，默认情况下，所有的告警都组织在一起，而一旦指定分组标签，则Alertmanager将按这些标签进行分组
  continue: false # 指定是否继续匹配下一个路由规则，默认为false，即只匹配到第一个规则
                          # false表示遇到第一个匹配的路由分支后即终止；否则，将继续匹配后续的子路由节点，默认就是false；
  group_wait: 10s # 指定分组等待时间，即等待相同警报组的时间。在此时间内收到的相同组的警报将被合并成一个通知。
                            # 发出一组告警通知的初始等待时长；允许等待一个抑制告警到达或收集属于同一组的更多初始告警，通常是0到数分钟，默认30s；
  group_interval: 5m # 分组间隔时间，即多长时间内不再触发相同警报组的警报
                                 # 发送关于新告警的消息之前，需要等待多久；新告警将被添加到已经发送了初始通知的告警组中；一般在5分钟或以上，默认5m
  repeat_interval: 3h # 成功发送了告警后再次发送告警信息需要等待的时长，一般至少为3个小时，默认4h
  receiver: <string> # 指定默认的接收者，即没有匹配到具体规则时使用的接收者。
  match: # 警报必须中标签和值的与下面的 <labelname>:<labelvalue> 相匹配才会发送报警
    [ <labelname>: <labelvalue>, ... ]
  match_re: # 与match同理，但labelvalue支持正则
    [ <labelname>: <regex>, ... ]
  matchers: # 警报必须满足以匹配节点的匹配器列表。
    [ - <matcher> ... ]
  routes: # 用于定义更具体的路由规则。每个规则都包括  match 条件、自定义的分组等待时间、接收者以及是否继续匹配下一个规则。可以有一个或者多个，配置与route大体一致。子路由配置段，子路由中未定义的参数则继承主路由的，如果没有匹配的子路由，则发送给到根路由的默认接收方：'default-receiver'.
  - match:
      severity: 'critical' # 匹配的条件，可以是标签的匹配或者是表达式匹配
    group_wait: 10s
    receiver: <string>
    continue: true
  - match_re:
      service: '^web.*$' # 使用正则表达式匹配服务名称以'web'开头的警报
    receiver: 'slack-notifications'  # 匹配到该规则时使用的接收者
    continue: true

route:
  receiver: default-receiver
  continue: false
  group_wait: 10s
  group_interval: 5m
  repeat_interval: 3h

# 必选参数：
receivers:
- name: default-receiver # 定义接收者的名称
  email_configs:
    - to: '767483070@qq.com' # 指定邮件接收者的地址
      send_resolved: true # 是否发送已解决的警报通知，默认false
# 可选参数，不指定则从 global 段继承：
      from: 'alertmanager@example.com' # 指定邮件的发件人地址
      smarthost: 'smtp.example.com:587' # 指定SMTP服务器的地址和端口
      auth_username: 'alertmanager' # 指定SMTP服务器的身份验证用户名
      auth_password: 'password'  # 指定SMTP服务器的身份验证密码
      auth_identity: '' # 指定SMTP服务器的身份验证身份
      require_tls: true # 指定是否需要TLS加密连接
      headers: # 自定义邮件头部信息
        From: 'Alertmanager <alertmanager@example.com>'

receivers:
- name: 'wechat-notifications'
  # 定义接收者的名称
  wechat_configs:
  - crop_id: 'your_crop_id'
    # 企业微信的Crop ID
    secret: 'your_secret'
    # 企业微信应用的Secret
    agent_id: 'your_agent_id'
    # 企业微信应用的Agent ID
    to_user: '@user1|@user2'
    # 指定接收消息的用户，可以是用户ID，也可以是用户账号（需带@符号）
    to_party: '1|2'
    # 指定接收消息的部门，可以是部门ID，也可以是部门名称（需带|分隔符）
    to_tag: 'tag1|tag2'
    # 指定接收消息的标签，可以是标签ID，也可以是标签名称（需带|分隔符）
    safe: '0'
    # 是否保密消息，0表示否，1表示是，默认为0
    enable_id_transform: false
    # 是否启用用户ID转换，如果设置为true，则to_user中的值会被转换为对应的用户ID，默认为false
    enable_id_transform: false
    # 是否启用用户ID转换，如果设置为true，则to_user中的值会被转换为对应的用户ID，默认为false

...
receivers:
  - name: 'wechat' # 接收者名称
    wechat_configs:
    - send_resolved: true # 是否通知已解决的警报，默认false
      message: '{{ template "wechat.default.message" . }}'
      message_type: 'text' # 消息的类型，支持的值为“text”和“markdown”。
      agent_id: '1000004'  #应用ID（登录企业微信后，应用管理 --> 自建应用 --> AgentId）
      to_party: '2' # 接收部门id
      #to_user: ''
      #to_tag: ''
...

receivers:
- name: 'webhook-notifications'
  # 定义接收者的名称
  webhook_configs:
  - url: 'http://example.com/alert'
    # 指定Webhook的目标URL
    send_resolved: true
    # 指定是否发送已解决的警报通知
    http_config:
      bearer_token: 'your_bearer_token'
      # 指定用于身份验证的Bearer Token
      basic_auth:
        username: 'username'
        password: 'password'
      # 指定用于基本身份验证的用户名和密码
    max_alerts: 10
    # 指定每次发送的最大警报数量
    proxy_url: 'http://proxy.example.com:8080'
    # 指定代理服务器的地址和端口
    timeout: 10s
    # 指定超时时间
    tls_config:
      insecure_skip_verify: true
      # 是否跳过对目标服务器TLS证书的验证

send_resolved: <boolean> # 是否通知已解决的警报，默认false，可选项

url: <string> # 要向其发送HTTP POST请求的端点，必选项

http_config: <http_config> # HTTP客户端的配置，默认global.http_config，可选项

max_alerts: <int> # 单个webhook消息中包含的最大警报数，警报高于此阈值时将被截断，默认0 表示不设限即包括所有警报，可选项

inhibit_rules:
- source_match:
    severity: 'critical'
  target_match:
    severity: 'warning'
  # 配置匹配源与目标的条件
  equal:
  - 'instance'
  # 配置用于匹配的标签名称

- source_match:
    severity: 'critical'
  target_match_re:
    severity: 'critical|warning'
  # 配置匹配源与目标的条件
  equal:
  - 'instance'
  # 配置用于匹配的标签名称

# 在AllIstancesDown告警规则触发critical级别的告警时，若后来出来其它critical级别的报警 ，且其node标签的值与前面报警的node标签值相同，则认为告警隶属同一节点
...
inhibit_rules:
  - source_match:
      alertname: AllInstancesDown
      severity: critical
    target_match:
      severity: critical
    equal:
      - node
...      

templates:
- name: 'custom-email'
  # 定义模板的名称
  subject: '{{ template "custom-email.subject" . }}'
  text: |
    {{ template "custom-email.text" . }}
  html: |
    {{ template "custom-email.html" . }}

  # 定义模板中使用的子模板
  'custom-email.subject': 
    text: "Alert: {{ .CommonLabels.alertname }}"

  'custom-email.text':
    text: |
      {{ range .Alerts }}
        {{ .Annotations.summary }}
        {{ .Labels.severity }} alert for {{ .Labels.job }} on {{ .Labels.instance }}.
        {{ .Annotations.description }}
        Summary: {{ .Annotations.summary }}
        Severity: {{ .Labels.severity }}
        Description: {{ .Annotations.description }}
        Runbook: {{ .Annotations.runbook_url }}
      {{ end }}

  'custom-email.html':
    text: |
      {{ range .Alerts }}
        <p>{{ .Annotations.summary }}</p>
        <p><b>{{ .Labels.severity }}</b> alert for {{ .Labels.job }} on {{ .Labels.instance }}.</p>
        <p>{{ .Annotations.description }}</p>
        <p>Summary: {{ .Annotations.summary }}</p>
        <p>Severity: {{ .Labels.severity }}</p>
        <p>Description: {{ .Annotations.description }}</p>
        <p>Runbook: <a href="{{ .Annotations.runbook_url }}">{{ .Annotations.runbook_url }}</a></p>
      {{ end }}