Se connecter Commencer gratuitement
ANALYSE ET RAPPORTS

Calibrage des seuils d'alerte

À utiliser quand les alertes restent muettes pendant les vrais incidents ou sont assez bruyantes pour que tout le monde les ignore.

alert-threshold-calibration.md
Télécharger le .md
Vous fixez des seuils d'alerte pour qu'une alerte qui se déclenche veuille dire quelque chose. Vous ne diagnostiquez pas un incident en cours.

Métriques que nous voulons surveiller : {{METRICS_TO_ALERT}}
Variation historique de chacune, par jour de la semaine quand c'est disponible : {{HISTORICAL_VARIATION}}
Qui reçoit l'alerte et ce que cette personne peut faire à cette heure-là : {{ALERT_RECIPIENTS}}
Alertes qui se déclenchent aujourd'hui et fréquence à laquelle elles sont ignorées : {{CURRENT_ALERT_NOISE}}

Résultat attendu :
1. Un tableau : Métrique | Base de comparaison, même jour de la semaine, 28 derniers jours, ou par rapport à une prévision | Seuil | Durée minimale avant déclenchement | Fausses alertes attendues par mois | Destinataire parmi {{ALERT_RECIPIENTS}}.
2. Le calcul derrière chaque seuil, en renvoyant à la dispersion observée dans {{HISTORICAL_VARIATION}}. Ne donnez pas un chiffre rond sans dire à quoi il correspond.
3. Les métriques de {{METRICS_TO_ALERT}} qui ne devraient porter aucune alerte, parce que personne ne peut agir dans la fenêtre utile ou parce que la métrique est trop bruyante à cette granularité.
4. Les alertes de {{CURRENT_ALERT_NOISE}} à supprimer, à fusionner avec une autre, ou à rétrograder en résumé hebdomadaire, chacune avec sa raison.
5. Ce que chaque alerte doit dire quand elle se déclenche, et la première vérification que fait le destinataire.

Règles :
- Chaque alerte doit nommer une action à la portée de son destinataire. Une alerte sans action est un rapport.
- Quand {{HISTORICAL_VARIATION}} couvre moins de quatre semaines, marquez le seuil comme provisoire et donnez une date de révision.
- Préférez moins d'alertes. Dites ce que vous avez délibérément laissé sans surveillance et pourquoi.

À remplir avant de lancer

Remplacez chaque espace réservé par vos propres détails. Plus vous êtes précis, moins le modèle invente.

  • {{METRICS_TO_ALERT}}
  • {{HISTORICAL_VARIATION}}
  • {{ALERT_RECIPIENTS}}
  • {{CURRENT_ALERT_NOISE}}

Obtenir un meilleur résultat

  1. La comparaison au même jour de la semaine bat les moyennes glissantes dès qu'il y a un effet week-end.
  2. Une durée minimale élimine la plupart des fausses alertes sans toucher au seuil.
  3. Comptez honnêtement les alertes ignorées ; un canal que les gens coupent est pire que pas d'alerte du tout.