Prometheus + Grafana로 Redis 모니터링 구축하기

우리 팀에서 하고 있는 DB 모니터링 방법 중 하나는 프로메테우스와 그라파나를 이용하는 것이다. DBMS variables 비교 사이트에서 다뤘던 Redis, MySQL, PostgreSQL 중 하나씩 맡아서 직접 모니터링을 구축해보는 시간을 갖게 되었고, Redis를 담당하게 되었다.

 

NHN 면접에서 어떤 메트릭을 어떻게 모니터링 할 수 있을 지에 대한 질문을 받아보기도 했었고, 늘 해보고 싶던 부분이어서 이번 기회에 확실히 알고 넘어가야겠다! 아자 💪

 

과제 요구사항은 다음과 같다. 일단 다 처음이기 때문에 주신 내용을 이해하는게 먼저..! 하나씩 스터디하면서 차근차근 설치해봐야겠다 :)

 

과제 1

• 서버 1: DB 서버
  • DB 설치
  • 프로메테우스 exporter 설치 (node exporter, db exporter)
• 서버 2: 모니터링용 서버
  • 프로메테우스 설치
  • 그라파나 설치

• 서버 1에는 2개 이상의 db 인스턴스 띄우기
  • 같은 버전으로? 아니면 다른 버전?
  • Docker compose?
• node exporter는 서버당 한개, db exporter는 db 인스턴스별로 띄우기
• 그라파나 로그인해서 접속하면 대시보드에서 인스턴스 상태 확인할 수 있도록 구축

 

---

과제 2

• alert manager 설치
• 프로메테우스 alert rules 수집
  • 알람을 받아야 하는 rule 생성, 알람을 받아야 하는 이유 생각해보기
• web hook
  • 두레이 웹훅 이용하여 특정 rule 도달했을 때 알람 받도록 설정