Вас розбудили даремно. Знову. Polylane читає кожен алерт і глушить шум.
Приєднатися до списку очікуванняElevated error rate on payments-api
- 02:14:07 Alert received
Datadog · payments-api error rate · occurrence #1
- 02:14:09 Triage started
Fetching the monitor query and metrics 30 min before, 5 min after the firing.
- 02:14:58 Triaged as an incident
Severity high. Error rate 41× the 30-minute baseline, clustered on POST /v1/charges; deploy f3a9c12 landed 18 minutes before the firing.
- 02:15:02 Investigation started
3 hypotheses · 3 passes each
- 02:31:44 Alert fired again (occurrence #2)
Folded into this issue after 16 quiet minutes; the running investigation was nudged.
- 03:06:12 Alert recovered
Provider recovery received. Issue resolved.
Шум закінчується тут. Кожен алерт тріажовано.
-
Шторми згортаються
Сотня повторів одного й того самого сигналу згортається в один.
-
Дублікати розпізнаються
Повторне спрацювання потрапляє в проблему, до якої належить, замість відкривати нову, навіть коли ваш провайдер перегрупував його.
-
Оцінка за даними
Агент витягує справжній запит, що стоїть за вашим монітором, і метрику навколо спрацювання, і порівнює з нормою.
-
Інцидент або шум
Шум архівується. Інциденти розслідуються самостійно, а коли ваш провайдер повідомляє про відновлення, проблема також закривається.