서버 모니터링 with docker => 4. mysqld-exporter, nginx-prometheus-exporter

🍺 목차 🍺(보시려면 아래 더보기 를 눌러주세요.)

서버 모니터링 with docker => 1. vnstat

서버 모니터링 with docker => 2. netdata

서버 모니터링 with docker => 3. grafana, prometheus, nodeexporter, cadvisor, alertmanager

서버 모니터링 with docker => 4. mysqld-exporter, nginx-prometheus-exporter

서버 모니터링 with docker => 5. grafana를 이용하여 복수 서버를 한 곳에서 모니터링 하기

---

 

 

이번 글에서는 앞 글에서 설치한 grafana, prometheus, nodeexporter, cadvisor, alertmanager 에다가 mysql_cname과 front_nginx_cname 컨테이너의 좀더 자세한 정보를 grafana에서 볼 수 있도록 할 것입니다.

그러기 위해서는 mysqld-exporter, nginx-pormetheus-exporter 를 더 설치할 것입니다.

 

1. 설치하기 전 알아야 할 내용

가. nginx-pormetheus-exporter

이것을 사용하기 위해서는 nginx에 --with-http_stub_status_module 모듈이 활성화 되어 있어야 합니다. 

우리가 사용하는 front_nginx_cname 컨테이너에 사용하는 이미지는 이미 위 모듈이 포함되어 있으니 따로 신경쓰지 않아도 됩니다.

 

나. mysqld-exporter

이것을 사용하기 위해서는 mysql에 접속해서 각종 정보를 가져올 수 있는 별도 계정을 만들어 주어야 하지만, 본 글에서는 그냥 간단히 root 계정으로 이용하도록 하겠습니다.

 

2. nginx-pormetheus-exporter 사용을 위해 설정할 것

가. nginx 설정 수정

docker\front\default.conf 파일의 맨 처음 80포트에 해당되는 server 블럭에 아래와 같은 내용을 추가합니다.

server {
    listen 80;

    modsecurity on;
	modsecurity_rules_file /usr/local/nginx/conf/modsecurity.conf;

    location /metrics {       ##🔴 이 부분 추가
        stub_status on;       ##🔴 이 부분 추가
        access_log off;       ##🔴 이 부분 추가
    }

    location / {
        limit_req zone=hello burst=10 nodelay;
        limit_req_status 429;

        proxy_pass         http://web;
        proxy_redirect     off;
        proxy_set_header   Host $host;
        proxy_set_header   X-Real-IP $remote_addr;
        proxy_set_header   X-Forwarded-For $proxy_add_x_forwarded_for;

        proxy_buffering off;
        proxy_set_header X-Forwarded-Proto $scheme;
        proxy_set_header X-Forwarded-Host $host;
        proxy_set_header X-Forwarded-Port $server_port;
    }
}

 

나. 이제 컨테이너를 새로 생성한 후 http://서버아이피/metrics 로 접속을 했을 때 아래와 같은 화면이 나와야 합니다.

 

 

3. docker-compose.yml 수정

### 맨 아래 volumes: 바로 위에 추가하기 ###

  nginx-prometheus-exporter:
    image: nginx/nginx-prometheus-exporter:0.11.0
    container_name: nginx-prometheus-exporter
    restart: unless-stopped
    expose:
      - 9113
    command:
      - -nginx.scrape-uri=http://front_nginx/metrics  #바로 위에서 설정한 경로
      - -nginx.retries=10
    depends_on:
      - prometheus
    networks:
      - mung_net                         
  mysqld-exporter:
    image: quay.io/prometheus/mysqld-exporter
    container_name: mysqld-exporter
    restart: unless-stopped
    environment:  #🔴여기서는 간단히 root 계정 정보 사용
      - DATA_SOURCE_NAME=root:password@(mysql_serv:3306)/testdb
    expose:
      - "9104"      
    depends_on:
      - mysql_serv
    networks:
      - mung_net

 

4. prom\prometheus\prometheus.yml 내용 추가

  ### scrape_configs: 아랫 부분에 다음 내용 추가하기 ###
  
  - job_name: 'mysqld-exporter'
    scrape_interval: 15s
    static_configs:
      - targets: ['mysqld-exporter:9104']      

  - job_name: 'nginx-prometheus-exporter'
    scrape_interval: 15s
    static_configs:
      - targets: ['nginx-prometheus-exporter:9113']

=> 여기 까지 작업을 했으면 컨테이너를 새로 생성합니다.

 

5. grafana dashboard 추가하기

가. http://서버아이피:3000 로 접속해서 grafana에 로그인 합니다.

나. Dashboard를 추가하기 위해 아래 그림처럼 Import 를 눌러줍니다.

 

다. Dashboard를 직접 만드는 것도 가능하지만, 여기서는 쉽게 이미 만들어져 있는 Dashboard를 사용할 것입니다. 아래 링크를 눌러 grafana Dashboard 홈페이지로 이동한 후 검색창에 nginx 라고 입력합니다.

https://grafana.com/grafana/dashboards/

 

라. 목록 중에서 NGINX  exporter 를 찾아 눌러줍니다.

 

마. 화면에서 Copy ID to clipboard 를 눌러줍니다. 그럼 아이디 값이 복사됩니다.

 

바. 다시 grafana 화면으로 돌아와서 그림 부분을 눌러 붙여넣기를 한 후 Load 버튼을 누릅니다.

 

사. 아래 그림 부분을 눌러 Prometheus (default)를 선택한 후 Import 버튼을 눌러줍니다.

 

아. 그럼 아래와 같이 앞단에 있는 nginx 의 정보를 볼 수 있습니다.

 

자. 위와 똑같은 방법으로 mysql을 위한 Dashboard를 설치하면 됩니다. 저는 아래와 같이 첫번째로 나오는 MySQL Overview를 사용하였습니다.

 

차. 위 MySQL Overview Dashboard를 설치하면 아래와 같은 화면을 볼 수 있습니다.

 

---

🍺🍺 작업한 모든 소스는 아래 링크에서 확인하실 수 있습니다. 🍺🍺

https://github.com/mmssem/ServerMonitoring

GitHub - mmssem/ServerMonitoring

---