prometheus & grafana

# prometheus namespace 생성
kubectl create namespace prometheus

# prometheus 설치
helm repo add prometheus-community https://prometheus-community.github.io/helm-charts 
helm repo update
helm search repo prometheus
helm pull prometheus-community/kube-prometheus-stack

# 압축풀기
tar xvfz kube-prometheus-stack-51.9.0.tgz
# 폴더로 이동
cd kube-prometheus-stack

# prometheus 설정
vim values.yaml

# 51.9.0 버전 기준 
# 2627번째 줄 ClusterIP > NodePort로 변경
# 3077번째 줄 serviceMonitorSelectorNilUsesHelmValues: false 확인
# 3168번째 줄 retentionSize: “원하는 사이즈”
# 저장 후 종료(:wq)

# grafana 설정
현재 폴더 kube-prometheus-stack
cd charts
cd grafana

vim values.yaml
# 188번째 줄 ClusterIP > NodePort로 변경

# 실행
helm install --namespace prometheus --generate-name prometheus-community/kube-prometheus-stack -f my-values.yaml

# NodePort 확인
kubectl get all -n monitoring

# 인바운드 규칙 편집 - NodePort 포트 열기

[IP:Port]로 prometheus 접속

# grafana port 설정
kubectl patch svc kube-prometheus-stack-1697532382-grafana -n monitoring -p '{"spec": {"type": "LoadBalancer"}}'
# type LoadBalancer 확인
kubectl get svc -n monitoring

# 인바운드 규칙 편집 - LoadBalancer 라인에 PORT(S)(NodePort 열기)

[IP:Port]로 grafana 접속

# grafana 로그인
# id : admin
# password 확인
kubectl get secrets kube-prometheus-stack-1697522929-grafana --namespace monitoring -o jsonpath="{.data.admin-password}" | base64 -d

loki

# loki namespace 생성
kubectl create namespace loki

# 기본 폴더로 이동
# loki 설치
helm repo add grafana https://grafana.github.io/helm-charts
helm repo update
helm search repo loki
helm pull grafana/loki-stack

# 압축풀기
tar xvfz loki-stack-2.9.11.tgz 
# 폴더로 이동
cd loki-stack

vim my-values.yaml
# 6번째 줄 enabled: true 확인
# 25번째 줄 promtail true 확인

# 실행
helm install --namespace loki --generate-name grafana/loki-stack -f my-values.yaml

# 서비스 이름 및 실행 확인 
kubectl get all -n loki

# grafana 접속 > 토글 항목 > connection > data source > new data source > loki 검색 > loki 클릭
# loki 설정
# name : loki
# http url 확인
# 서비스이름.네임스페이스:3100
# http://loki-stack-????.loki:3100

# Save & test 클릭
# connection successful 메시지 확인 [초록박스]

# 토글 항목 > Explore 접속
# 체크 부분 prometheus > loki로 변경 후 code에 입력, Run query 클릭 - 원하는 pod log 확인