Alerter votre équipe quand l'e-mail ne suffit pas
Le besoin
Votre supervision envoie déjà des e-mails. Un e-mail arrive dans une boîte que quelqu'un doit regarder, derrière une connexion qui est peut-être précisément ce qui est tombé. À trois heures du matin, un téléphone qui sonne est le seul canal qui marche.
La réponse habituelle est un service d'astreinte facturé au mois et par intervenant. Si vos alertes sont rares et votre équipe petite, c'est un abonnement pour une poignée de messages par mois.
La mise en place
- Un appel depuis votre supervision. Alertmanager de Prometheus, une tâche planifiée, une sonde dans votre propre code : tout ce qui sait faire un appel HTTP sait lever une alerte. Un endpoint, une clé.
- Une règle de routage par préfixe. Faites partir les numéros d'astreinte par la SIM dont l'opérateur les dessert le mieux, pour que l'alerte ne dépende pas d'une route lente la nuit.
- Une réponse qui accuse réception. L'intervenant répond « ok » et la réponse arrive dans Conversations, sur son fil. Une règle peut l'étiqueter, ou appeler un webhook pour clore l'incident dans votre propre outil.
- La passerelle se surveille elle-même. Elle lève ses propres alertes, par SMS, quand un téléphone décroche, qu'une batterie faiblit ou qu'une SIM atteint son quota du jour. Celles-là non plus ne passent par personne.
Ce à quoi faire attention
Gardez une SIM d'alerte à l'écart des campagnes. Un quota journalier dépensé par un envoi marketing est un quota qui n'est plus là pour l'alerte de minuit. Sortez le téléphone du pool de routage, ou donnez-lui son propre quota.
Une alerte est du trafic transactionnel. Marquez-la comme telle à l'envoi, et la fenêtre d'envoi et la pause de nuit ne la retiendront jamais : elles retiennent les campagnes, et seulement elles.
Votre passerelle fait maintenant partie de la chaîne que vous surveillez. Elle tourne sur une machine qui vous appartient, ce qui veut dire que vous la surveillez comme le reste : l'historique de disponibilité de chaque téléphone est sur l'écran Appareils, et les alertes vous préviennent avant qu'un téléphone muet ne vous coûte un incident.