김붕어

exporter 종류 내용 grok nginx metrics, log 수집 blackbox port 정보 수집 process 프로세스 관련 정보 수집

개요nginx log exporter는 nginx log metrics 정보를 수집해주는 역할을 합니다.nginx log exporter 메뉴얼 : https://github.com/martin-helmich/prometheus-nginxlog-exporter Nginx 설정1. nginx log 설정 nginx 엑세스 로그 포맷에서는 “request_time” 옵션이 빠져있다.“request_time” metrics 수집을 위해서 설정해준다.log_format를 아래와 같이 수정해준다.sudo vi /etc/nginx/nginx.conf... 중간 생략 ...http { log_format main '$remote_addr - $remote_user [$time_local] ' ..

개요 nginx exporter는 nginx metrics 정보를 수집해주는 역할을 합니다. Nginx exporter 메뉴얼 : https://github.com/nginxinc/nginx-prometheus-exporter Nginx 설정 1. 모듈 확인 nginx 관련 metrics를 수집하기 위해서는 “ngx_http_stub_status_module” Enable 설정이 필요합니다. ngx_http_stub_status_module Enable 설정 확인 nginx -V 2>&1 | grep -o with-http_stub_status_module with-http-_stub_status_module 2. nginx 설정 metrics 접근 가능한 경로 설정 http dirctive내에 serv..

1. Slack “NEW APP” 생성apps 슬랙 페이지 접속 : https://api.slack.com/apps“Create New App” 클릭 App Name 입력Workspace 선택“Create App” 클릭 Install your app 설치 Features → “Oauth & Permissions” 클릭“OAuth Tokens for Your Wokrspace” 토큰 확인ex) xoxb-xxxxxxxx Features → “Oauth & Permissions” 클릭Scopes 설정chat:writefiles:write 2. Slack Bot 추가생성한 앱 이름을 입력하면 앱을 초대할 수 있다.“@grafana-Alert” 입력 3. Slack Bot 테스트테스트 사..

개요 Grafana는 데이터 시각화 및 모니터링 도구입니다. Grafana를 사용하면 다양한 데이터 소스에서 데이터를 검색하고 시각화할 수 있습니다. 예를 들어, 서버의 성능 지표, 인터넷 응용 프로그램의 웹 트래픽, 온라인 서비스의 사용자 상호작용과 같은 데이터를 시각화 할 수 있습니다. Grafana는 다양한 데이터 소스에 대한 지원을 제공하며, Prometheus, Graphite, Elasticsearch, InfluxDB 등 다양한 오픈 소스 및 상용 소프트웨어를 지원합니다. Grafana는 대시 보드 및 경고 기능을 포함하여 다양한 기능을 제공합니다. 1. data source 가져오기 Configuration → “Data sources” → “Add data source” 클릭 Promet..

node exporter 이란? 서버에 Node exporter를 설치하고 프로메테우스 서버가 데이터를 수집해간다. 1. EC2에 node-exporter 설치 # node-exporter 다운로드 wget https://github.com/prometheus/node_exporter/releases/download/v0.17.0/node_exporter-0.17.0.linux-amd64.tar.gz # node-exporter 설정 tar xvfz node_exporter-0.17.0.linux-amd64.tar.gz sudo cp node_exporter-1.3.1.linux-arm64/node_exporter /usr/local/bin/ sudo useradd -M -r -s /bin/false n..

프로메테우스 구성 가이드 : https://prometheus.io/docs/prometheus/latest/configuration/configuration/#static_config 프로메테우스 구성도 1. Prometheus Component Prometheues Operator Prometheus Server와 Alertmanager 등을 관리 Prometheues Server ServiceMonitor 정의된 Target 메트릭 정보를 수집 ServiceMonitor, PodMonitor가 있다. AlertManager가 설정된 내용으로 Alert 전송 Prometheues metrics kubernetes metrics-server의 메트릭 정보를 수집 Prometheues node expor..

개요Prometheus은 EKS Infra 메트릭 수집 모니터링 툴이다.Grafana은 수집한 메트릭 지표를 그래프화해주는 툴이다.prometheus은 쿠버네티스에서 가장 많이 사용하는 오픈소스 모니터링 툴이다.CNCF 제단이며, kubernetes, docker 컨테이너를 모니터링에 특화되어있다. 설치 메뉴얼 : https://github.com/prometheus-operator/kube-prometheus 1. 프로메테우스 설치 - Source 파일 : https://github.com/tingtomkim/devops/tree/main/monitoring/prometheusmkdir prometheuscd prometheushelm repo add prometheus-community https:/..

AWS Client VPN을 AWS Account 마다 구성하게 되면, 연결이 필요한 Account의 VPN으로 변경해서 다시 연결해야합니다. TGW으로 여러 개의 AWS Account가 연결되어 있을 때, 한번의 AWS Client VPN 접속으로 여러 개의 AWS Account 접근할 수 있다. 1. Flow Chart AWS Client VPN 접속, VPN Interface 아이피 할당 받음 서로 다른 VPC 대역들이 연결이 가능하도록 TGW 연결 10.101.0.0/16 대역이 오픈되어 있기 때문에 TGW을 통해서 다른 VPC 네트워크 연결 가능 2. 선행 작업 1. AWS Client VPN 설정 가이드 https://dongwook35.tistory.com/30 2. AWS TGW 설정 가이..

개요AWS-node-termination-handler를 통해 EKS Cluster Node로 Spot instance가 셧다운될 경우, 다른 Spot instance로 자동 배치될 수 있게 컨트롤할 수 있다.https://github.com/aws/aws-node-termination-handler Spot Instance ?AWS Spot Instance를 왜 사용해야할까? 장점 AWS Spot instance는 EC2 인스턴스를 사전 약정 없이 on-demand 가격보다 70 ~90% 저렴한 비용으로, 이용할 수 있어서 워크로드에 적절하게 배포하여 사용한다면 서버 비용을 크게 절감할 수 있다. 단점 수요/공급에 비례하여 더 높은 가격을 책정하는 쪽으로 스팟 인스턴스가 할..