Prometheus + Grafana 설치부터 연동까지

✔️ 이 글에서 진행할 것들 1. Redis 설치 2. Node Exporter 설치 3. Redis Exporter 설치 4. Prometheus 설치 5. Prometheus에 Exporter 연결 6. Grafana 설치 7. Grafana에 Prometheus 연결 8. Grafana에 대시보드 생성 9. Alertmanager 설치 및 Dooray! 인커밍 훅 알림 설정 monitored 인스턴스에 node exporter와 설치한 redis 버전별로 redis exporter를 설치합니다. monitoring 인스턴스에 prometheus를 설치하고 exporter들을 연결합니다. monitoring 인스턴스에 grafana를 설치하고 prometheus를 연결해주면, 최종적으로 exporte..

프로메테우스와 그라파나 알아보기

2023.05.16 - [🌏 인프라/모니터링] - Prometheus + Grafana로 Redis 모니터링 구축하기 과제를 진행하면서 새롭게 알게된 기술들을 정리해보고자 합니다! ✔️ 목차 1. 메트릭 2. 프로메테우스 3. 그라파나 먼저, 메트릭(metrics)이란 뭘까? 성능 지표..? 정도로 알고 있는데 정확히 자세히 아는 것이 중요하기 때문에 정리해보겠습니다. Metric 메트릭하면 다음과 같이 화려한 대시보드를 떠올리실 수 있을 것 같습니다. 어떤 애플리케이션을 쓰는지, 어떤 서비스인지에 따라 해석이 달라질 수 있지만 보편적으로 메트릭은 수집되는 시계열 데이터를 말합니다. 웹서버에서는 요청 시간이 될 수 있고, 데이터베이스에서는 활성 연결 수나 활성 쿼리 수 등이 될 수 있습니다. 로그와 달리..

Prometheus + Grafana로 Redis 모니터링 구축하기

우리 팀에서 하고 있는 DB 모니터링 방법 중 하나는 프로메테우스와 그라파나를 이용하는 것이다. DBMS variables 비교 사이트에서 다뤘던 Redis, MySQL, PostgreSQL 중 하나씩 맡아서 직접 모니터링을 구축해보는 시간을 갖게 되었고, Redis를 담당하게 되었다. NHN 면접에서 어떤 메트릭을 어떻게 모니터링 할 수 있을 지에 대한 질문을 받아보기도 했었고, 늘 해보고 싶던 부분이어서 이번 기회에 확실히 알고 넘어가야겠다! 아자 💪 과제 요구사항은 다음과 같다. 일단 다 처음이기 때문에 주신 내용을 이해하는게 먼저..! 하나씩 스터디하면서 차근차근 설치해봐야겠다 :) 과제 1 서버 1: DB 서버 DB 설치 프로메테우스 exporter 설치 (node exporter, db exp..

AWS Summit Seoul 2023 후기 - Day 2

첫 오프라인 써밋에 참가하다! 그동안 코로나로 인해서 온라인으로만 진행되었는데 올해 드디어 현장에서 열린 AWS Summit Seoul 2023에 다녀왔다! 이번 AWS Summit Seoul 2023은 5월 3일, 5월 4일 이틀동안 열렸고, 장소는 코엑스였는데 코엑스 전체를 대관할 정도로 대규모로 진행되었다. 너무 너무 가고 싶었는데 마침 팀원 분들께서 가게 되어서 데리고 가주셨다! 개인적으로 이번이 첫 오프라인 컨퍼런스, 써밋이었는데 멋진 경험을 할 수 있어서 정말 감사했다. 괜히 조기 마감 된게 아님을 실감할 수 있을 정도로 정말 많은 사람들이 있었는데, 대학생부터 주니어, 시니어까지 다양한 연령대와 데이터베이스, AI, 인프라, 시스템 등의 직종이 모인 것 같았다. 아무래도 오랜만의 오프라인 행..

AWS에서 최소한의 비용으로 구현하는 멀티리전 DR 자동화 구성 | AWS Summit Seoul 2023

AWS에서 최소한의 비용으로 구현하는 멀티리전 DR 자동화 구성 Day 2 | Session 4 | 15:20 - 16:00 안준환 솔루션즈 아키텍트, AWS Yongzhe Ren 솔루션즈 아키텍트, AWS 재해복구에 대한 대비는 온프레미스를 이용할때나, 클라우드를 이용할때나 항상 중요하다. 이 세션에서는 AWS Backup을 활용하여 최소한의 비용으로 클라우드 환경에서 운영 중인 시스템에 대한 멀티 리전 재해 복구를 자동화하는 방안을 살펴본다. 더불어 온프레미스에서 운영중인 시스템에 대한 재해복구를 비용 효율적으로 자동화하기 위해 어떻게 AWS Elastic Disaster Recovery를 활용할 수 있는지도 알아본다. AWS 서비스를 활용해 대부분의 시간동안 유휴 상태인 복구 사이트에 대한 비용을 ..

성공적인 AWS RDS 마이그레이션을 위한 여정과 필수 고려사항 | AWS Summit Seoul 2023

성공적인 AWS RDS 마이그레이션을 위한 여정과 필수 고려사항 Day 2 | Session 3 | 14:20 - 14:50 서호석 컨설팅팀 상무, 에티버스 AWS RDS로의 성공적인 마이그레이션을 위해 각 스텝 별 준비 사항을 소개한다. 마이그레이션 과정에서 고려, 숙지해야 할 항목들을 공유하여 성공적인 이관을 준비하는 여정, 에티버스 세션과 함께 하시기 바란다. 1. Amazon DB Services Amazon RDS와 Aurora Amazon RDS Custom For Oracle 2. DB Migration Steps General Steps For DB Migration Access Inspection Lists 3. DB Migration Considerations Amazon RDS로의 마..

오픈소스 데이터베이스로 탈 오라클! Why not? | AWS Summit Seoul 2023

오픈소스 데이터베이스로 탈 오라클! Why not? Day 2 | Session 1 | 11:10 - 11:50 김지훈 WWSO 솔루션즈 아키텍트, AWS 박승전 Project Manager, SK Telecom 아직 많은 기업들이 상용 데이터베이스로 인해 발생하는 높은 비용으로 고통받고 있다. 이를 돕기 위해 AWS는 오픈 소스를 기반으로 한 다양한 워크로드의 특성에 맞는 데이터베이스 서비스를 제공하고 있다. 이번 세션에서는 AWS의 워크로드 특성에 따른 목적에 맞는 다양한 데이터베이스 서비스가 어떤 것이 있는지 알아보고, 기존 오라클 데이터베이스를 기반으로 구성된 서비스에 AWS의 데이터베이스를 도입하여 탈 오라클에 성공한 고객 사례를 소개한다. 데이터 현대화 아키텍처 전통 방식에서 마이크로 서비스 ..

[교육] 클라우드 첫 걸음, NHN Cloud로 시작하기 - part2

4월 20일(목) 10~17시 한국컨퍼런스센터 ✅ 교육 목표 NHN Cloud 서비스를 활용하여 2-tier 구조를 설계하고 구축할 수 있습니다. 인프라 확장 기술인 Auto Scale 개념을 이해하고 활용할 수 있습니다. 클라우드 서비스를 운영 관리에 필요한 서비스를 사용할 수 있습니다. ✅ 교육 목차 소규모 웹사이트 구축하기 인스턴스 시스템 모니터링 및 감시 설정하기 조건에 맞춰 서버 Scale In/Out 해보기 1. 소규모 웹사이트 구축하기 NHN Cloud에서 아래와 같은 아키텍처를 구성하는 실습을 진행해보았다! Lab1. 기본 인프라 서비스 활성화 리전부터 확인하고 설정하기! 잘못된 리전에 만들었을 경우, 다 부수고 다시 만들어줘야 함.. 기본 인프라 서비스 활성화하기 Lab2. 2개의 VPC..

[교육] 클라우드 첫 걸음, NHN Cloud로 시작하기 – part1

4월 19일 (수) 10~17시 | 한국컨퍼런스센터 ☀️ 오전 세션 NHN Cloud 교육과정 VPC, 서브넷, 라우팅 등 VPC 내 상품 -> NAT 게이트웨이, VPC 피어링, 내부 통신을 위한 서비스 게이트웨이 올해 자격증도 나온다! 고매출 상품 : Nofi API 다양한 교육이 있음! 클라우드 컴퓨팅과 NHN Cloud 소개 클라우드 컴퓨팅 이점 신속한 인프라 도입 유연한 인프라 관리 예상치 못한 트래픽 폭주 대응 -> 오토 스케일 이용한 만큼 지불하는 비용 Cloud Deployment Models Public Private Hybrid private public, on-premise public Multi CSP 이중화 구성 두개 이상의 외부 클라우드를 활용 비즈니스 요구에 가장 적합한 공급업..

실제 운영서버에서 Django 프로젝트 띄우기

개발한 vue-django 프로젝트를 실제 운영서버에 띄우는 과정을 정리합니다! 개발서버에서 구축했던 방법이 운영서버에서 적용할 때 조금씩 다른 부분도 있었고, 여러 단계를 거쳐야 했기 때문에 잊어 버리지 않기 위해 기록해봅니다 스타트..! 🐾 단계 인스턴스 생성 보안규칙 생성 DB ACL 허용 요청 도커 설치 - v23.0.3 Jenkins 도커 서버 띄우기 - v2.399 Jenkins 컨테이너 생성 및 실행 Jenkins 컨테이너 내부에 DooD 구성하기 패키지 설치 및 환경 구성 웹 서버 띄우기 백그라운드로 웹 서버 띄우기 1. 인스턴스 생성 개발서버 ssh -i {pem키} ubuntu@{ip} OS : Ubuntu Server 20.04 LTS 타입 : r2.c4m16 (4vCPU, 16GB)..

클라우드 서비스 이해하기! IaaS, SaaS, PaaS란? (ft. NHN Cloud)

IaaS vs. SaaS vs. PaaS 요즘, 클라우드 하면 IaaS, PaaS, SaaS 를 많이 들어보셨을텐데, 이는 클라우드 서비스를 분야별 특성으로 나눈 것입니다. IaaS, PaaS, SaaS가 대체 무엇인지 비교를 통해 알아보겠습니다. IaaS (Infrastructure-as-a-service) 시스템 인프라를 서비스로서 제공합니다. 네트워크, 스토리지, 서버 등을 가상화하여 제공하고 관리합니다. 즉, 가상머신을 빌려주는 서비스입니다. NHN Cloud, AWS, MS Azure, GCE 등에서 제공합니다. PaaS (Platform-as-a-service) 애플리케이션 실행 환경을 서비스로서 제공합니다. 소프트웨어 작성을 위한 플랫폼을 가상화하여 제공하고 관리합니다. 개발자는 운영체제, ..

인프라 엔지니어의 교과서 | 6장

6장. 구매 및 상담 24 구매 및 상담 구매처 선정 방문 목적 업체 선정 비교 견적 도입 테스트 해외 구매 25 자산 관리 자산 관리 대상 자산 관리 방법 재고 감가상각 재고 조사 폐기 처리

인프라 엔지니어의 교과서 | 5장

5장. 스토리지 21 스토리지 스토리지 : 데이터를 저장하는 장치 로컬 스토리지 : 서버 내부의 저장 영역 외부 스토리지 : 서버 외부의 저장 영역 DAS : 서버에 직접 연결하는 것 NAS : 네트워크를 통해 연결하는 것 로컬 스토리지 서버 내부에 디스크를 설치해서 이용하는 저장 영역 외부 스토리지를 사용하지 않으므로 설치 공간을 절약할 수 있음 대신, 설치할 수 있는 디스크 개수와 확장성이 줄어듦 외부 스토리지 서버 외부에 준비한 스토리지 장치, 영역 1. DAS Direct Attached Storage, 서버에 직접 연결하는 스토리지 로컬 스토리지만으로 용량이 부족할 때 사용 DAS에는 많은 디스크를 설치할 수 있으므로 스트라이핑 수가 많은 RAID로 구성하여 디스크 I/O 성능을 높임 OS는 D..

인프라 엔지니어의 교과서 | 7장

7장 데이터 센터 26 데이터 센터를 사용한다 데이터 센터 냉각 시스템 1. 이중 마루 냉각 방식 2. 열 복도/냉 복도 냉각 방식(배열 흡인 방식) 3. 외기 냉각 방식 데이터 센터 선정 포인트 입지 서버 설치 대수 랙 반입 or 대여 이용 가능한 전원 무거운 하중에 대한 대응 방재 수준 UPS(무정전 장치)와 발전기 성능 폐기물 처리 반입 공간과 주차장 유무 리모트 핸드 서비스 유무 사용자 룸 유무 케이지 유무 네트워크 회선의 커넥티비티 비정기적 요구 물품 대여의 유연성 매점과 숙박 시설 유무 비용 27 랙에 장비를 설치한다 네트워크 장비 설치 랙의 맨 위나 중간에 설치 공기 흐름 전력 용량 문제 28 자체 서버 룸을 사용한다 자사 서버 룸 설치 포인트 면적 전력 용량 냉각 내하중 지진 대책 먼지 대..

인프라 엔지니어의 교과서 | 11장

인프라 엔지니어가 갖춰야 할 것 도큐먼트 읽는 힘 기르기 새로운 하드웨어와 소프트웨어를 도입할 때마다 도큐먼트를 읽어야 함 업그레이드를 할 때 구 버전과 신 버전을 비교해야 함 치명적인 버그가 있어서 최신 버전이 공개되었다면 도큐먼트를 읽은 후 도입을 검토해야 함 카탈로그 읽는 힘 기르기 하드웨어와 소프트웨어를 선택할 때 카탈로그를 참고함 각 전문 용어의 의미를 이해하고, 각각 기기에 어느 정도의 성능이 있는지 파악해야 함 자신이 담당하는 서브에 어느 기종이 가장 적절한지 판단해야 함 소규모 인프라와 대규모 인프라 소규모 인프라 IT 인프라의 모든 것을 적은 인원이 다룸 기획, 설계, 장비 구입, 구축, 운영까지 모두 경험할 수 있음 비용 대비 효과를 위한 장비 튜닝 기회 대규모 인프라 IT 인프라를 많..

인프라 엔지니어의 교과서 | 8장

솔루션 여러 장비를 효율적으로 관리하기 위해서 감시 솔루션을 이용 감시 솔루션 형태는 2가지로 나뉜다. SNMP(Simple Network Management Protocol)를 이용하는 형태 각 서버에 에이전트 프로그램을 설치해서 그 자료를 수집하는 형태 종류 오픈 소스 상용 소프트웨어 나기오스 Nagios 2002년 에탄 갈스타드를 중심으로 개발되어 역사가 오래되고 국내에 많은 사용자가 있음 신뢰도가 높고 자유로운 커스터마이징 가능 웹 설정 화면이 없고, 설정을 텍스트 파일로 저장 장애 발생 이력을 텍스트 파일로 저장 감시 설정은 플러그인으로 추가함. 플러그인은 직접 만들 수도 있고, 전용 커뮤니티에 공개되어 있음 https://www.nagios.org/ Nagios - The Industry St..

인프라 엔지니어의 교과서 | 3장

3장. 운영체제 리눅스 레드햇 계열 : RHEL, CentOS, Fedora, Vine Linux, Scientific Linux, Oracle Linux 등 데비안 계열 : Debian, Ubuntu, KNOPPIX, Linux Mine 등 윈도우 서버 윈도우 서버에서 실행되는 소프트웨어를 사용할 때 닷넷(.NET) 프레임워크를 사용할 때 액티브 디렉터리 환경을 사용할 때 유닉스 대부분 엔터프라이즈 서버용으로 사용 AIX, Solaris, HP-UX

인프라 엔지니어의 교과서 | 2장

2장. 서버 05 서버의 종류 랙 마운트형과 타워형 서버의 차이 랙 마운트형 데이터 센터나 서버 룸에 설치된 랙 안에 들어감 19인치 랙에 수용하며 유닛 단위로 사이즈가 정해짐 (1U 높이 = 1.75 inch = 44.45mm) 타워형 서버 사내 서버 룸에 설치되거나 사무실 또는 점포 등에도 설치됨 냉방과 소음을 고려해서 장소 선정 필요 사무실 설치용으로 저소음 서버를 준비할 수 있음 수십 Kg까지 무게가 나가므로 사내에 고밀도로 설치할 경우, 바닥 하중에 주의 엔트리, 미들레인지, 하이엔드 서버 엔트리 서버 수십만 엔 웹 서버나 애플리케이션 서버에 이용 소켓 단위로 1~2개의 CPU를 탑재할 수 있음 미들레인지 서버 수백만 엔 데이터베이스 서버나 기간계 서버에 이용 기간계 시스템 = 기간 업무 시스템..

인프라 엔지니어의 교과서 | 1장

1장. 인프라 엔지니어의 업무 01 인프라 엔지니어의 업무 인프라 설계 인프라를 만든 목적을 잘 이해한다. 목적을 달성하기 위해 필요한 기능이나 성능 등을 기준으로 조건을 정리한다. 조건에 맞는 기획서와 설계서를 작성한다. 비용, 기간 등을 예상 책임자에게 결재를 올린다. 인프라 구축 작업 내용 : 기기 운반과 조립, 장착, 설치, 설정, 동작 테스트, 부하 테스트 등 인프라 엔지니어가 직접하거나 오퍼레이터나 외부 업체에 맡김 SI(System Integration) 업계 CE : 기기 설치 관련 하드웨어 작업 SE : 서버나 스토리지 관련 시스템 작업 NE : 네트워크 장비 관련 네트워크 작업 웹기반 업계 보통 역할 분담을 하지 않고 처음부터 끝까지 인프라 엔지니어의 몫 인프라 운영 장애 대응 수용량 ..

NHN Cloud 인스턴스에 Redis 설치하기 (2) - Yum 이용

✅ 공식문서 Install Redis on Linux ⬇️ Redis 설치 전에 인스턴스 생성하는 방법 ⬇️ 2023.01.08 - [인프라/NHN Cloud] - NHN Cloud 인스턴스 생성하기 인스턴스 환경 OS : CentOS 7.9 아키텍쳐: x86_64 설치할 Redis 버전 redis 7.0.8 (the lastest stable) 1. 설치 과정 ( 1 / 4 ) 인스턴스에 SSH 방식으로 접속 ssh -i [키페어이름.pem] centos@[플로팅IP] ( 2 / 4 ) epel 다운로드 yum 리포지토리에는 최신버전(7.0.8)이 아닌 3.2.12 버전이 있으므로 epel, remi 저장소를 이용 sudo yum install epel-release 💡 EPEL이란? 더보기 Extra..

NHN Cloud 인스턴스에 Redis 설치하기 (1) - 압축파일 이용

✅ 공식문서 Install Redis from Source ⬇️ Redis 설치 전에 인스턴스 생성하는 방법 ⬇️ 2023.01.08 - [인프라/NHN Cloud] - NHN Cloud 인스턴스 생성하기 인스턴스 환경 OS : CentOS 7.9 아키텍쳐: x86_64 설치할 Redis 버전 redis 7.0.8 (the lastest stable) 1. 설치 과정 ( 1 / 6 ) 인스턴스에 SSH 방식으로 접속 ssh -i [키페어이름.pem] centos@[플로팅IP] ( 2 / 6 ) wget 다운로드 # 인터넷이 가능한 환경일 경우 sudo yum install wget # 인터넷이 불가능할 경우 # 설치할 파일을 서버에 업로드해서 진행 ( 3 / 6 ) redis 바이너리 버전 압축파일 다운..

NHN Cloud 인스턴스에 MySQL 설치하기 (3) - 설정

임시비밀번호 변경 ALTER USER '[user명]'@'localhost' IDENTIFIED BY '[변경할 비밀번호]'; USER 생성, 권한 부여 user 생성 CREATE USER '[user명]'@'[접근가능범위]' IDENTIFIED BY '[비밀번호]'; # 내부 접근을 허용하는 user 생성 CREATE USER '[user명]'@'localhost' IDENTIFIED BY '[비밀번호]'; # 외부 접근을 허용하는 user 생성 CREATE USER '[user명]'@'%' IDENTIFIED BY '[비밀번호]'; # 특정 IP만 허용하는 user 생성 CREATE USER '[user명]'@'192.168.188.122' IDENTIFIED BY '[비밀번호]'; # 특정 IP 대..

NHN Cloud 인스턴스에 MySQL 설치하기 (2) - Yum 이용

✅ 공식문서 https://docs.nhncloud.com/ko/TOAST/ko/Overview/ ⬇️ MySQL 설치 전에 인스턴스 생성하는 방법 ⬇️ 2023.01.08 - [인프라/NHN Cloud] - NHN Cloud 인스턴스 생성하기 인스턴스 환경 OS : CentOS 7.9 아키텍쳐: x86_64 0. 설치 전 확인 인스턴스에 MySQL을 처음 설치한다는 가정으로 설치를 진행한다. 설치 여부 확인 rpm -qa | grep mysql 아래와 같이 나오면 설치가 되어 있는 것이다. 재설치를 하기 위해서는 삭제를 먼저 하고 설치를 진행한다. yum remove mysql-server 1. 설치 과정 ( 1 / 8 ) 인스턴스에 SSH 방식으로 접속 ssh -i [키페어이름.pem] centos@..

NHN Cloud 인스턴스에 MySQL 설치하기 (1) - 압축파일 이용

✅ 공식문서 https://docs.nhncloud.com/ko/TOAST/ko/Overview/ ⬇️ MySQL 설치 전에 인스턴스 생성하는 방법 ⬇️ 2023.01.08 - [인프라/NHN Cloud] - NHN Cloud 인스턴스 생성하기 인스턴스 환경 OS : CentOS 7.9 아키텍쳐: x86_64 0. 설치 전 확인 인스턴스에 MySQL을 처음 설치한다는 가정으로 설치를 진행한다. 설치 여부 확인 mysql --version 아래와 같은 형식으로 나오면 설치가 되어 있는 것이다. 재설치를 하기 위해서는 삭제를 먼저 하고 설치를 진행한다. rm -rf /var/lib/mysql 데이터 파일이나 config 파일까지 삭제해야 한다. 1. 설치 과정 ( 1 / 12 ) 인스턴스에 SSH 방식으로 ..

NHN Cloud 인스턴스간 통신하기

시나리오 client1 인스턴스에서 공개키(id_rsa.pub)를 생성하고, host 인스턴스로 보낸다. 받은 공개키 내용을 host 인스턴스에 등록한다. 왜? 기존에 비밀번호를 네트워크를 통해 보내는 비밀번호 인증은 네트워크 상에서 ID/비밀번호가 그대로 노출되는 문제가 있고, 접속할 때마다 입력해야 하는 번거로움이 있다. SSH 키는 이와 달리 공개키 암호 방식을 사용하여 서버에서 인증받을 수 있으며, 암호를 생략하고 원격 호스트로 접속할 수 있다. 실습 환경 client1 인스턴스 : CentOS 7.9 host 인스턴스 : CentOS 7.9 준비할 항목 1. client1에서 실행 sudo vi /etc/ssh/sshd_config PubkeyAuthentication yes PasswordAu..

NHN Cloud 인스턴스 생성하기

✅ 공식문서 NHN Cloud : https://console.nhncloud.com/project/VMltoqPh/compute/instance NHN Cloud 사용자 가이드 : https://docs.nhncloud.com/ko/Compute/Instance/ko/overview/ 인스턴스 생성 과정 조직 생성 (그룹의 개념, 프로젝트를 여러개 소유할 수 있음) 프로젝트 생성 서비스 추가 Compute > Instance > + 인스턴스 생성 이미지 설정 이미지 종류(CentOS, Ubuntu, Windows 등), 최소 블록 스토리지(저장공간 크기), 비트 인스턴스 정보 설정 인스턴스 이름, 타입(리소스 사양) 수, 키 페어(ssh -i [키페어파일] [OS]@[IP]) 네트워크 플로팅 IP (외..