Alertmanager

Alertmanager är den del av Prometheus-projektet som tar hand om larmen när de har blivit larm. Klienter – i första hand Prometheus själv, men även skript och andra övervakningssystem – postar larm till dess API, och Alertmanager bestämmer vad som ska hända med dem. Larm med samma larmnamn och samma gruppetiketter slås ihop till en notifiering, så att en trasig switch som drar med sig fyrtio tjänster blir ett meddelande i stället för fyrtio.

Routingen är ett träd i konfigurationsfilen: en standardmottagare och en rad underrutter med matchers mot larmens etiketter. Varje rutt pekar på en mottagare – e-post, webhook, Slack, PagerDuty, Opsgenie, Telegram och flera andra – och kan sätta egna väntetider och upprepningsintervall. Två mekanismer håller nere bruset: tystnader, som är tidsatta undantag en driftare lägger in för planerat underhåll, och inhibitionsregler, som automatiskt dämpar larm som är följder av ett annat larm – till exempel alla varningar från en värd som slutat svara.

Gränssnittet visar aktiva larm grupperade per rutt, tystnaderna med matchare och sluttid, och status med konfigurationen, versionen och klusterläget. Ett kommandoradsverktyg, amtool, gör samma saker från terminalen, och REST-API:t i version 2 med OpenAPI-specifikation används av allt från Prometheus till egna skript. Flera instanser kan köras som ett kluster och dela tystnader och notifieringshistorik via ett skvallerprotokoll.

Alertmanager samlar inga mätvärden och kör inga kontroller själv – den behöver en larmkälla. Den är heller ingen eskaleringskedja med jourhavande och svarskvitton; den grupperar, tystar och levererar. All text i gränssnitt, dokumentation och support är på engelska.