모니터 품질
모니터 품질 (Monitor Quality)
Datadog의 Monitor Quality 기능은 60일 이상 음소거된 경보나 지정된 수신자가 없는 모니터처럼 모니터링 설정에서 흔히 발생하는 잘못된 구성(misconfiguration)을 식별해요. 이 기능은 팀이 경보 기준을 유지하고 중요한 경보를 놓치지 않게 해줘요. Monitor Quality를 사용하면 같은 페이지에서 잘못 구성된 모니터를 식별하고 해결할 수 있어요.
출처: 문서
본문
잘못 구성된 모니터 보기 (View misconfigured monitors)
Manage Monitors 페이지에서 Monitor Quality 탭을 클릭하면 개선이 필요한 모니터 목록에 접근할 수 있어요. Datadog는 첫 모니터를 만든 후 이 기능을 자동으로 활성화해요.
Monitor Quality 페이지를 팀, 생성자, 서비스, 환경을 기준으로 필터링하고 보면서 목록을 정리하고 관리할 수 있어요.
{% image source="https://docs.dd-static.net/images/monitors/quality/filter_monitor_quality.08a574bf94f02723494d4f8d792e160f.png?auto=format&fit=max&w=850 1x, https://docs.dd-static.net/images/monitors/quality/filter_monitor_quality.08a574bf94f02723494d4f8d792e160f.png?auto=format&fit=max&w=850&dpr=2 2x" alt="Filtering dropdown options for creators, teams, services, and env available on the Monitor Quality page" /%}
모니터 개선과 모범 사례 따르기 (Improve monitors and follow best practices)
Monitor Quality는 다음과 같은 품질 문제가 있는 모니터를 표시해요:
- 경보 볼륨이 높음
- 60일 이상 음소거됨
- 수신자 누락
- 지연(delay) 누락
- 알림 채널 잘못 구성됨
- 복합 모니터에 구성 요소(constituent) 누락
- alert 상태에 고착됨
경보 볼륨이 높은 모니터 (High volume of alerts)
너무 자주 트리거되는 모니터는 경보 피로(alert fatigue)를 유발하고 팀이 중요한 경보에 무감각해지게 할 수 있어요. Monitor Quality 페이지를 사용하면 높은 경보 볼륨을 발생시키는 모니터를 식별하고 수정할 수 있어요.
60일 이상 음소거된 모니터 (Muted for over 60 days)
다운타임 (Downtimes)은 예정된 유지보수, 계획된 중단이나 시스템 종료 중 경보를 음소거하거나, 주말과 저녁 시간에 경보를 멈추는 데 유용해요. 하지만 오랜 기간(60일 이상) 음소거되거나 부분 음소거된 모니터는 간과됐을 가능성을 나타내요. 이런 모니터를 음소거 해제해 경보를 재개하고 포괄적인 모니터링 범위를 확보할 수 있어요.
다운타임 구성 오류로 인해 경보를 발생시키지 않는 모니터를 확인하고 음소거를 해제하세요.
수신자가 누락된 모니터 (Monitors are missing recipients)
모니터가 경보나 알림을 발생시킬 때, 그 경보는 문제를 해결하고 조치를 취할 수 있는 팀이나 담당자에게 전달돼야 해요. 모니터 알림에 수신자가 추가되지 않으면 서비스에 대해 얼마나 선제적으로 대응할 수 있는지가 줄어들어요. Monitor Quality 페이지를 사용해 수신자 없이 구성된 모니터를 검토하세요.
지연이 누락된 모니터 (Missing a delay)
클라우드 통합(예: AWS, Azure, Google Cloud)의 데이터는 크롤러(crawler)로 각 API에서 가져와요. 이런 메트릭은 지연을 두고 도착하므로 모니터 구성에서 이를 반영할 수 있어요. 평가 지연 (evaluation delay)이 없는 클라우드 데이터 모니터는 오탐(false positive)에 대해 경보를 발생시킬 수 있어요.
클라우드 데이터를 크롤링하지만 권장 지연이 누락된 모든 모니터를 확인하세요. 크롤링된 데이터에 대한 자세한 내용은 클라우드 메트릭 지연 (Cloud Metric Delay) 페이지를 참고하세요.
잘못 구성된 알림 채널 (Misconfigured notification channels)
@notifications를 사용하면 경보가 통합, 워크플로, 또는 Datadog 케이스로 전달되도록 모니터를 커스터마이징할 수 있어요. @notifications이 잘못 구성되면 예상했던 경보가 적절한 채널로 전송되지 않아요.
알림 채널이 잘못 구성된 모니터를 확인하고 필요에 따라 편집하세요.
구성 요소가 누락된 복합 모니터 (Composite monitors are missing constituents)
복합 모니터 (Composite monitors)는 사용자 정의 로직에 따라 여러 하위 모니터(구성 요소, constituents)의 결합된 상태를 평가해요. 삭제된 구성 요소를 참조하는 복합 모니터는 평가하거나 알림을 보내지 않아요. 비활성 복합 모니터를 식별하고 삭제하세요.
alert 상태에 고착된 모니터 (Stuck in alert state)
ALERT 상태의 모니터는 서비스에 주의가 필요한 문제가 있다는 신호예요. 계속 ALERT 상태인 모니터가 많으면 실제로 주의가 필요한 문제에서 집중을 빼앗을 수 있어요. 이런 모니터가 왜 alert 상태에 고착됐는지 조사하고 구성에 맞게 편집하세요.