아무 일도 아닌데 또 호출을 받았습니다. Polylane이 모든 경보를 읽고 노이즈를 잠재웁니다.
대기자 명단 등록 Issues Elevated error rate on payments-api Timeline
Elevated error rate on payments-api
High
Incident
·Detected from a Datadog alert
OverviewMetricsLogsTracesTimelinePropertiesInvestigation
- 02:14:07 Alert received
Datadog · payments-api error rate · occurrence #1
- 02:14:09 Triage started
Fetching the monitor query and metrics 30 min before, 5 min after the firing.
- 02:14:58 Triaged as an incident
Severity high. Error rate 41× the 30-minute baseline, clustered on POST /v1/charges; deploy f3a9c12 landed 18 minutes before the firing.
- 02:15:02 Investigation started
3 hypotheses · 3 passes each
- 02:31:44 Alert fired again (occurrence #2)
Folded into this issue after 16 quiet minutes; the running investigation was nudged.
- 03:06:12 Alert recovered
Provider recovery received. Issue resolved.
노이즈는 여기서 끝납니다. 모든 경보가 트리아지됩니다.
-
폭주가 접힙니다
같은 호출이 백 번 반복되어도 하나로 접힙니다.
-
중복을 인식합니다
재발화는 새 이슈를 여는 대신 원래 속한 이슈에 붙습니다. 제공자가 다시 그룹화하더라도 그렇습니다.
-
데이터로 판단합니다
에이전트가 모니터 뒤의 실제 쿼리와 발화 전후의 메트릭을 가져와 정상 상태와 비교합니다.
-
인시던트인가 노이즈인가
노이즈는 기록으로 남습니다. 인시던트는 스스로 조사되고, 제공자가 복구되면 이슈도 닫힙니다.
이미 있는 모니터링과 함께 동작합니다. 기존 경보를 Polylane으로 향하게 하세요.
Datadog 
Honeycomb 
Sentry 
Amazon CloudWatch 
Vercel 
Axiom 
Grafana Cloud 
Render 
Cloudflare