Grafana 알림 규칙 생성 및 관리

알림 규칙은 알림 시작 여부를 결정하는 평가 기준 세트입니다. 규칙은 하나 이상의 쿼리와 표현식, 조건, 평가 빈도 및 조건이 충족되는 기간(선택 사항)으로 구성됩니다.

쿼리 및 표현식에서는 평가할 데이터세트를 선택하는 반면, 조건은 알림을 생성하기 위해 알림에서 충족하거나 초과해야 하는 임계치를 설정합니다. 간격은 알림 규칙이 평가되는 빈도를 지정합니다. 기간을 구성하면 조건을 충족해야 하는 기간을 나타냅니다. 또한 규칙은 데이터가 없는 경우 알림 동작을 정의할 수 있습니다.

다음 섹션에서는 다양한 종류의 Grafana 알림 규칙 생성 및 관리를 설명합니다.

Cortex 또는 Loki 관리형 알림 규칙 생성

Grafana를 사용하면 외부 Cortex 또는 Loki 인스턴스에 대한 알림 규칙을 생성할 수 있습니다.

사전 조건 

Cortex 또는 Loki 관리형 기록 규칙 생성

외부 Cortex 또는 Loki 인스턴스에 대한 기록 규칙을 생성 및 관리할 수 있습니다. 기록 규칙을 사용하면 자주 필요하거나 계산 비용이 많이 드는 표현식을 미리 계산하고, 해당 결과를 새로운 시계열 세트로 저장합니다. 이 새 시계열을 쿼리하는 것이 더 빠릅니다. 특히 대시보드를 새로 고칠 때마다 동일한 표현식을 쿼리하기 때문에 대시보드의 경우 더 빠릅니다.

사전 조건 

Cortex 및 Loki 데이터 소스의 경우 해당 서비스를 구성하여 눈금자 API를 활성화합니다.

Grafana 관리형 알림 규칙 생성

Grafana를 사용하면 하나 이상의 데이터 소스를 쿼리하고, 결과를 줄이거나 변환하며, 서로 비교하거나 임계치를 수정하는 알림 규칙을 생성할 수 있습니다. 이러한 작업이 처리되면 Grafana는 연락 지점에 알림을 보냅니다.

단일 및 다차원 규칙

Grafana 관리형 알림 규칙의 경우 클래식 조건의 규칙을 생성하거나 다차원 규칙을 생성할 수 있습니다.

단일 차원 규칙(클래식 조건)

클래식 조건 표현식을 사용하여 조건이 충족될 때 단일 알림을 시작하는 규칙을 생성합니다. 여러 시리즈를 반환하는 쿼리의 경우 Grafana에서는 각 시리즈의 알림 상태를 추적하지 않습니다. 따라서 Grafana는 여러 시리즈에 대한 알림 조건이 충족되더라도 단일 알림만 전송합니다.

표현식을 포맷하는 방법에 대한 자세한 내용은 Grafana 설명서의 Expressions를 참조하세요.

다차원 규칙

쿼리에서 반환된 각 시리즈에 대해 별도의 알림 인스턴스를 생성하려면 다차원 규칙을 생성합니다.

단일 규칙에서 여러 인스턴스를 생성하려면 Math, Reduce 또는 Resample 표현식을 사용하여 다차원 규칙을 생성합니다. 예를 들어, 다음을 수행할 수 있습니다.

다차원 규칙에 대한 성능 고려 사항

각 알림 인스턴스는 알림 할당량에 포함됩니다. 알림 할당량 내에서 수용할 수 있는 것보다 많은 인스턴스를 생성하는 다차원 규칙은 평가되지 않으며 할당량 오류를 반환합니다. 자세한 내용은 할당량에 도달함 오류 단원을 참조하십시오.

다차원 알림은 Grafana에서 알림 규칙을 평가하기 위해 쿼리할 때 Grafana 워크스페이스의 성능뿐만 아니라 데이터 소스의 성능에도 큰 영향을 미칠 수 있습니다. 다음 고려 사항은 모니터링 시스템의 성능을 최적화하는 데 도움이 될 수 있습니다.

할당량에 도달함 오류

단일 워크스페이스 내 존재할 수 있는 알림 인스턴스 수에 할당량이 있습니다. 해당 수에 도달하면 해당 워크스페이스에서 더 이상 새 알림 규칙을 생성할 수 없습니다. 다차원 알림의 경우 알림 인스턴스 수는 시간이 지남에 따라 달라질 수 있습니다.

다음은 알림 인스턴스에 대해 작업할 때 기억해야 할 중요한 사항입니다.

데이터 없음 또는 오류 사례 처리

데이터가 없거나 오류가 발생한 경우 알림 동작을 처리하는 방법에 대한 옵션을 선택합니다.

데이터 없음 처리를 위한 옵션은 다음 표에 나열되어 있습니다.

오류 사례 처리 옵션은 다음 표에 나열되어 있습니다.

알림 규칙에 대한 주석 및 레이블

주석 및 레이블은 알림 규칙, 데이터 소스 응답 및 알림 규칙 평가의 결과에서 비롯된 알림과 연결된 키-값 페어입니다. 알림 전달에서 직접 사용하거나 템플릿 및 템플릿 함수에서 사용하여 알림 연락처를 동적으로 생성할 수 있습니다.

주석

주석은 알림에 대한 추가 정보를 제공하는 키-값 페어입니다. description, summary, runbook_url, alertId, dashboardUid, panelId와 같은 주석을 사용할 수 있습니다. 이는 UI의 규칙 및 알림 세부 정보에 표시되며 연락 지점 메시지 템플릿에서 사용할 수 있습니다.

레이블

레이블은 알림에 대한 정보를 포함하는 키-값 페어입니다. 알림에 대한 레이블 세트가 생성되고 알림 평가 및 알림 프로세스 전반에 걸쳐 추가됩니다. 다음과 같은 방식으로 사용됩니다.

주석 및 레이블을 확장할 때 다음 템플릿 변수를 사용할 수 있습니다.

알림 규칙 관리

알림 페이지에는 알림 규칙이 나열됩니다. 기본적으로 규칙은 데이터 소스 유형별로 그룹화됩니다. Grafana 섹션에는 Grafana에서 관리하는 규칙이 나열되고 Cortex/Loki 섹션에는 Prometheus 호환 데이터 소스에 대한 규칙이 나열됩니다. Prometheus 호환 데이터 소스에 대한 알림 규칙은 볼 수 있지만 편집할 수 없습니다.

알림 규칙 보기

Grafana 알림을 사용하면 한 페이지에서 모든 알림을 볼 수 있습니다.

그룹 보기

그룹 보기에는 폴더별로 그룹화된 Grafana 알림 규칙과 namespace + group으로 그룹화된 Loki 또는 Prometheus 알림 규칙이 표시됩니다. 이는 규칙 관리를 위한 기본 규칙 목록 보기입니다. 각 그룹을 확장하여 이 그룹의 규칙 목록을 볼 수 있습니다. 규칙을 더 확장하여 세부 정보를 확인합니다. 규칙에서 생성되는 알림 및 작업 버튼을 확장하여 세부 정보를 볼 수도 있습니다.

상태 보기

상태 보기에는 상태별로 그룹화된 알림 규칙이 표시됩니다. 이 보기를 사용하여 어떤 규칙이 어떤 상태에 있는지에 대한 개요를 확인합니다. 각 규칙을 확장하여 세부 정보를 볼 수 있습니다. 작업 버튼 및 이 규칙에서 생성된 모든 알림과 각 알림을 추가로 확장하여 세부 정보를 볼 수 있습니다.

알림 규칙 필터링

알림 페이지에 표시되는 알림 규칙을 여러 가지 방법으로 필터링할 수 있습니다.

알림 규칙 편집 또는 삭제

Grafana 관리형 알림 규칙은 규칙을 저장하는 폴더에 대한 편집 권한이 있는 사용자만 편집하거나 삭제할 수 있습니다. 외부 Cortex 또는 Loki 인스턴스에 대한 알림 규칙은 편집자 또는 관리자 역할의 사용자가 편집하거나 삭제할 수 있습니다.

Cortex 또는 Loki 규칙 그룹 및 네임스페이스

규칙을 구성할 수 있습니다. 규칙은 규칙 그룹 내에서 생성되며 규칙 그룹은 네임스페이스로 구성됩니다. 규칙 그룹 내 규칙은 정기적 간격에 따라 순차적으로 실행됩니다. 기본 간격은 1분입니다. Cortex 또는 Loki 네임스페이스 및 규칙 그룹의 이름을 바꾸고 규칙 그룹 평가 간격을 편집할 수 있습니다.