Grafana Alert 설정

참고문서

https://afsdzvcx123.tistory.com/entry/Grafana-Alert-Slack-%EC%97%B0%EB%8F%99%ED%95%98%EA%B8%B0
https://brunch.co.kr/@leedongins/75
https://newtype.pe.kr/entry/promethues-%EC%BF%BC%EB%A6%AC-%EB%AA%87-%EA%B0%80%EC%A7%80
https://danawalab.github.io/common/2021/10/06/Common-Node-exporter.html >

Alertmanager를 활용하여 설정하려고 했으나 시각적인 자료가 있으면 더 좋을 것 같아서 Grafana에서 Alert 설정하는 법을 검색했습니다.

Grafana에서 Slack으로 알림설정하기

1) Slack에 Grafana 앱을 생성하기

Grafana 앱이 따로 없어서 추가해줘야 함

Grafana 앱 설정

Webhook URL, OAuth Token값은 시크릿하게 따로 메모해두세요!

2) Grafana에서 설정하기

Test 눌러서 알림 받아보기!

3) Grafana에서 Alert rules 생성하여 알림 받아보기

Instance="Node-exporter주소:9100"

Promql을 써본 적은 있지만 그 안의 리소스들이 어떤 타겟Group으로 이뤄져있는지 명확히 모르는 상황에서 Prometeheus 내에서 검색해봤습니다. 그래서 별도로 Instance를 지정해서 각각의 노드의 Alert값을 설정했습니다.