두 개의 EC2 인스턴스에서 Prometheus + Node Exporter

I’m happy to translate the article for you, but I need the full text of the post (the paragraphs, headings, etc.) in order to do so. Could you please paste the content you’d like translated? I’ll keep the source line exactly as you provided and preserve all formatting, code blocks, URLs, and technical terms.

1️⃣ Architecture Overview (What we are building)

EC2 #1 — TARGET (Ubuntu)

• Purpose: expose system metrics → 목적: 시스템 메트릭 노출
• Tool: Node Exporter → 도구: Node Exporter
• Port: 9100 → 포트: 9100

EC2 #2 — MONITOR (Ubuntu)

• Purpose: collect and display metrics → 목적: 메트릭 수집 및 표시
• Tool: Prometheus → 도구: Prometheus
• Port: 9090 → 포트: 9090

Browser
   ↓
Prometheus (Ubuntu, :9090)
   ↓ scrape
Node Exporter (Ubuntu, :9100)

2️⃣ AWS 보안 그룹 설정 (실험 모드)

⚠️ 프로덕션 환경에 적합하지 않음 – 교육 및 데모 용도로만 사용하세요.

2.1 보안 그룹 생성 (두 EC2 모두 동일한 단계)

AWS 콘솔 → EC2 → 보안 그룹 → 보안 그룹 생성

Outbound Rules – 기본값 유지: All traffic → 0.0.0.0/0

Attach this SG to:

• 모니터 EC2
• 타깃 EC2

3️⃣ TARGET EC2 (Ubuntu) – Node Exporter 설치

3.1 TARGET EC2에 연결

ssh ubuntu@<target-ip>

3.2 Node Exporter 다운로드

cd /tmp
wget https://github.com/prometheus/node_exporter/releases/download/v1.7.0/node_exporter-1.7.0.linux-amd64.tar.gz

3.3 압축 해제 및 설치

tar -xvf node_exporter-1.7.0.linux-amd64.tar.gz
cd node_exporter-1.7.0.linux-amd64
sudo mv node_exporter /usr/local/bin/

3.4 Node Exporter 시작 (포그라운드 데모)

node_exporter

다음과 같은 출력이 표시됩니다:

Listening on :9100

3.5 Node Exporter 확인

ss -tulnp | grep 9100

메트릭 테스트:

curl http://localhost:9100/metrics | head

✅ Node Exporter가 준비되었습니다

4️⃣ MONITOR EC2 (Ubuntu) – Prometheus 설치

4.1 MONITOR EC2에 연결

ssh ubuntu@<monitor-ip>

4.2 Prometheus 다운로드

cd /tmp
wget https://github.com/prometheus/prometheus/releases/download/v2.48.1/prometheus-2.48.1.linux-amd64.tar.gz

4.3 파일 추출

tar -xvf prometheus-2.48.1.linux-amd64.tar.gz
cd prometheus-2.48.1.linux-amd64

4.4 디렉터리 생성

sudo mkdir -p /etc/prometheus
sudo mkdir -p /var/lib/prometheus

4.5 바이너리 설치

sudo mv prometheus promtool /usr/local/bin/
prometheus --version

4.6 설정 파일 이동

sudo mv prometheus.yml /etc/prometheus/
sudo mv consoles console_libraries /etc/prometheus/

검증:

ls /etc/prometheus

예상 출력:

prometheus.yml
consoles
console_libraries

5️⃣ Prometheus 구성 (Ubuntu)

5.1 설정 편집

sudo nano /etc/prometheus/prometheus.yml

5.2 전체 파일을 다음 내용으로 교체

global:
  scrape_interval: 15s
  evaluation_interval: 15s

alerting:
  alertmanagers:
    - static_configs:
        - targets: []

rule_files: []

scrape_configs:
  - job_name: "prometheus"
    static_configs:
      - targets: ["localhost:9090"]

  - job_name: "node"
    static_configs:
      - targets: [":9100"]

저장 (CTRL+O, Enter, CTRL+X).

5.3 설정 검증 (매우 중요)

promtool check config /etc/prometheus/prometheus.yml

예상 출력:

SUCCESS

6️⃣ Prometheus 시작 (Ubuntu)

prometheus \
  --config.file=/etc/prometheus/prometheus.yml \
  --storage.tsdb.path=/var/lib/prometheus

다음과 같은 메시지를 찾으세요:

Server is ready to receive web requests.

7️⃣ Prometheus UI 접근

브라우저를 열고 다음 주소로 이동합니다:

http://<monitor-ip>:9090

그런 다음 Status → Targets 로 이동합니다.

✅ 기대 결과

prometheus   UP
node         UP

다음이 확인됩니다:

• 네트워킹 작동
• 보안 그룹 작동
• 메트릭이 수집되고 있음

8️⃣ 실시간 데모 쿼리 (Ubuntu Lab)

Graph 탭으로 이동합니다.

8.1 대상 확인

up

8.2 CPU 사용량 (%)

100 - (avg by (instance) (rate(node_cpu_seconds_total{mode="idle"}[5m])) * 100)

8.3 메모리 사용량 (%)

(node_memory_MemTotal_bytes - node_memory_MemAvailable_bytes) 
/ node_memory_MemTotal_bytes * 100

8.4 디스크 사용량 (%)

100 * (1 - (node_filesystem_avail_bytes{mountpoint="/"} 
/ node_filesystem_size_bytes{mountpoint="/"}))

Node Exporter는 이제 Prometheus가 수집하고 시각화할 수 있는 시스템 메트릭을 노출합니다.

📦 Overview

• Node Exporter는 TARGET EC2에서 실행되며 포트 9100에서 메트릭을 노출합니다.
• Prometheus는 정해진 간격으로 해당 메트릭을 수집합니다.
• 대상이 UP 상태이면 모니터링이 정상적으로 동작합니다.
• Security Groups는 네트워크 접근을 제어합니다 – Linux 수준의 방화벽이 아닙니다.

10️⃣ 우리가 의도적으로 허용한 것 (Lab Mode)

📊 Grafana 배치 및 설정 (Ubuntu, AWS EC2)

🔹 Grafana는 어디에 배치하나요?

Grafana는 MONITOR EC2에 설치됩니다, Prometheus와 함께.

최종 아키텍처 (매우 중요)

TARGET EC2 (Ubuntu)
└── Node Exporter
    └── :9100 (/metrics)

MONITOR EC2 (Ubuntu)
├── Prometheus
│   └── :9090 (scrapes node exporter)
└── Grafana
    └── :3000 (visualizes Prometheus data)

왜 Grafana를 MONITOR EC2에 두는가

• Grafana는 메트릭을 수집하지 않습니다 – 시각화만 합니다.
• Prometheus가 데이터 소스입니다.
• Grafana를 Prometheus와 같은 위치에 두면 다음과 같은 장점이 있습니다:
  • 네트워크 구성이 간단해짐
  • 실제 운영 환경 패턴
  • 교육이 쉬워짐

🧩 단계별: Ubuntu에 Grafana 설치 (MONITOR EC2)

🧠 일반적인 문제 및 해결 방법

모니터링을 즐기세요! 🎉