Fireship - Grafana is the goat... Let's deploy the LGTM stack
이 영상은 오픈 텔레메트리와 LGTM 스택을 사용하여 서버의 텔레메트리 데이터를 수집하고 시각화하는 방법을 설명합니다. 오픈 텔레메트리는 소프트웨어로부터 메트릭, 로그, 트레이스를 수집하는 산업 표준 프레임워크입니다. LGTM 스택은 Grafana, Prometheus, Tempo, Loki로 구성되어 있으며, 각각 데이터 시각화, 메트릭 저장, 트레이스 저장, 로그 저장을 담당합니다. 이 스택을 사용하면 소프트웨어의 이상 현상을 감지하고 시각화할 수 있습니다. 영상에서는 Hostinger의 VPS를 사용하여 Docker를 통해 LGTM 백엔드를 배포하는 방법을 설명합니다. 또한, Dino를 사용하여 서버에서 텔레메트리 데이터를 자동으로 수집하고 분석하는 방법도 다룹니다. 이를 통해 사용자는 오류를 빠르게 감지하고 해결할 수 있습니다.
Key Points:
- 오픈 텔레메트리는 다양한 프로그래밍 언어와 호환되는 텔레메트리 데이터 수집 프레임워크입니다.
- LGTM 스택은 Grafana, Prometheus, Tempo, Loki로 구성되어 데이터 시각화 및 저장을 지원합니다.
- Hostinger의 VPS를 사용하여 Docker로 LGTM 백엔드를 쉽게 배포할 수 있습니다.
- Dino를 사용하면 서버에서 자동으로 텔레메트리 데이터를 수집할 수 있습니다.
- 이 스택을 통해 소프트웨어의 오류를 빠르게 감지하고 분석할 수 있습니다.
Details:
1. 🏗️ 소프트웨어 개발과 버그 문제
1.1. 소프트웨어 시스템의 취약성 및 프로그래머의 반응
1.2. 효과적인 버그 관리 전략
2. ✨ 오픈 텔레메트리와 LGTM 스택의 이점
- 오픈 텔레메트리와 LGTM 스택을 활용하면 서버에서 텔레메트리 데이터를 수집 및 시각화할 수 있습니다.
- 이 도구를 사용하면 소프트웨어의 이상 현상을 시각적으로 감지하고 분석할 수 있습니다.
- 특히 VPS에 직접 호스팅할 경우, 서버 다운타임으로 인한 금전적 손실을 최소화하는 데 도움이 됩니다.
- 아폴로 13의 산소 탱크 폭발과 같은 심각한 버그는 무시할 수 없으며, 시스템의 안정성을 위해 즉각적인 조치가 필요합니다.
3. 🔧 LGTM 스택 설정 및 활용법
- LGTM 스택은 오픈 텔레메트리, 그라파나, 프로메테우스, 템포, 로키로 구성되어 있으며, 각각의 도구가 소프트웨어 가시성을 높이는 역할을 함.
- 오픈 텔레메트리는 메트릭, 로그, 트레이스를 수집하는 산업 표준 프레임워크로, 벤더에 종속되지 않는다는 점이 특징임.
- 그라파나는 데이터 시각화 도구로, 알람 설정 및 대시보드 생성이 가능하여 사용자의 생산성을 높임.
- 프로메테우스는 시계열 데이터베이스로 메트릭을 저장, 분석하는 데 사용됨.
- 템포는 트레이스를 저장하는 데이터베이스 역할을 하여 소프트웨어의 성능과 문제 해결에 도움을 줌.
- 로키는 로그 저장을 위한 데이터베이스로, 로그 분석을 통해 시스템의 안정성과 효율성을 높임.
- 각각의 요소는 오픈 텔레메트리로 수집된 데이터를 기반으로 하여 통합적인 소프트웨어 성능 분석과 모니터링을 가능하게 함.
4. 🌐 서버 준비와 호스팅 선택 가이드
- 서버 설정은 복잡할 필요가 없으며, 간단한 단계로 쉽게 구성할 수 있습니다.
- Hostinger의 리눅스 가상 전용 서버를 사용하여 프로젝트를 진행할 수 있으며, 이는 성능과 비용 효율면에서 우수합니다.
- Hostinger의 KVM 2 플랜은 2개의 CPU와 8GB RAM을 제공하며, 24개월 계약 시 월 $5.99로 67%의 할인된 가격을 제공합니다.
- Fireship 시청자는 추가로 10% 할인 코드를 사용할 수 있습니다.
- Hostinger를 선택하는 이유는 뛰어난 성능과 경제적 비용 때문이며, 다양한 플랜을 통해 사용자 맞춤형 서비스를 제공합니다.
- 다른 호스팅 옵션과 비교할 때, Hostinger는 가격 대비 성능 면에서 우수하며, 특히 개발자 및 소규모 사업자에게 적합합니다.
5. 🚀 도커 이미지 설치 및 서버 가동
- 도커 이미지를 사용하면 개별 컴포넌트를 설치할 필요 없이 전체 백엔드를 빠르고 효율적으로 배포할 수 있습니다. 이는 시간이 절약되고 설정 오류를 최소화합니다.
- Hostinger와 같은 플랫폼을 통해 Docker가 사전 설치된 서버를 손쉽게 가동할 수 있으며, 이는 복잡한 설정 과정을 간소화합니다.
- 서버 설정 시 SSH 키 설정을 권장합니다. 이는 보안성을 높이는 방법이며, 기본적으로는 루트 사용자 비밀번호만으로도 충분히 서버에 접근할 수 있습니다.
- 서버 가동 후, 관리 대시보드를 통해 SSH 연결 방법을 확인할 수 있으며, 이는 서버 관리의 효율성을 높입니다.
- 터미널을 통해 SSH로 서버에 접속하여 관리자 권한을 얻고, 이는 서버 설정 및 관리를 직접 수행할 수 있도록 합니다.
- Docker 명령어를 사용하여 Docker 데몬이 올바르게 작동하는지 확인할 수 있으며, 이는 시스템의 안정성을 보장합니다.
- Grafana와 같은 도구를 로컬 호스트에서 실행하여 IP 주소와 포트 3000을 통해 관리자 권한으로 접속할 수 있으며, 이는 실시간 모니터링을 가능하게 합니다.
- 일반적인 Docker 명령어에는 'docker run', 'docker ps', 'docker stop' 등이 있으며, 이는 컨테이너 관리에 필수적입니다.
- Docker 설정 시 자주 발생하는 이슈로는 포트 충돌 문제와 권한 문제 등이 있으며, 이를 해결하기 위해 포트 매핑 및 사용자 권한 설정을 주의해야 합니다.
6. 📊 데이터 시각화로 문제 해결하기
- Docker 이미지는 학습 및 실험에 적합하지만, 프로덕션 환경에는 권장되지 않음
- Grafana는 데이터 소스와 연결되어야 유용하며, Loki, Prometheus, Tempo와 같은 연결을 활용 가능
- Dino를 사용하여 서버에서 TypeScript를 실행할 수 있으며, 내장된 Telemetry 지원 기능 포함
- Dino 서버는 자동으로 트레이스 실행 및 콘솔 로그 수집
- 사용자가 Prometheus에서 평균 요청 시간을 추적하는 메트릭 생성 가능
- Open Telemetry를 통해 함수 생명 주기를 추적하는 트레이서 정의 가능
- 데이터베이스 쿼리를 래핑하는 스팬을 생성하여 오류 및 이상 현상 추적 가능
- Dino 앱을 서버에서 실행하고, 포트 8000에서 웹 애플리케이션에 접속 가능
- Telemetry 없이 사용자 불만을 기다릴 필요 없이 Grafana를 통해 바로 분석 가능
7. 🔒 보안 강화와 프로젝트 마무리
- 로그 오류 필터링을 통해 문제의 원인 파악 가능
- Prometheus의 자동 데이터 수집 및 쿼리 언어 활용 가능
- Tempo를 통해 서버 성능의 노드 그래프 및 히스토그램 확인 가능
- Hostinger의 Vanguard DOS 필터링 및 방화벽으로 보안 강화