Rocky Linux 8에서 Netdata 모니터링 도구를 사용하여 서비스를 설치하고 모니터링하는 방법

이 자습서에서는 첫 번째 옵션에 대해서만 설명합니다. 두 번째 옵션은 Netdatas 공식 문서를 참조해야 합니다.

더 많은 RAM 및 디스크 공간을 사용하도록 Netdata 구성

편집을 위해 /etc/netdata/netdata.conf 파일을 엽니다.

$ sudo nano /etc/netdata/netdata.conf

[global] 섹션 아래에 다음 줄을 붙여넣습니다.

[global]
...
    memory mode = dbengine
    page cache size = 32
    dbengine disk space = 256

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

페이지 캐시 크기는 사용되는 RAM의 양을 결정하고 dbengine 디스크 공간은 디스크 사용량을 결정합니다. 기본적으로 Netdata는 32MB의 RAM과 256MB의 디스크 공간을 사용합니다. 이 값의 주석을 제거하고 두 값 중 하나를 원하는 대로 변경할 수 있습니다.

Netdatas Storage Metric 계산기를 사용하여 필요한 RAM 및 디스크 공간을 결정할 수 있습니다.

수집 빈도 줄이기

메트릭 수집 사이의 시간을 늘려 Netdatas 성능을 최적화할 수 있습니다. 기본적으로 Netdata는 매초마다 메트릭을 수집합니다.

이를 변경하려면 편집을 위해 Netdata 구성 파일을 엽니다.

$ sudo nano /etc/netdata/netdata.conf

[global] 섹션 아래에 다음 줄을 입력합니다. 이렇게 하면 빈도가 5초로 증가합니다.

[global]
...
    update every = 5

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

7단계 - Slack 알림 구성

첫 번째 단계는 Slack 애플리케이션을 만들고 워크스페이스의 특정 채널에 연결하여 Slack 알림을 구성하는 것입니다.

Slack API 페이지를 방문하고 앱 만들기 버튼을 클릭하여 애플리케이션 만들기를 시작합니다.

From Scratch 링크를 클릭하여 앱을 만듭니다.

앱 이름을 선택하고 앱을 표시할 작업 공간을 선택합니다. 앱을 기존 작업 영역과 연결하지 않으려면 다른 작업 영역을 만들고 이 단계로 돌아올 수 있습니다.

왼쪽 사이드바의 기능 메뉴에서 옵션을 선택하여 수신 웹후크 페이지를 연 다음 웹후크를 활성화합니다.

페이지 하단에 있는 작업 공간에 새 Webhook 추가 버튼을 클릭하고 작업 공간과 알림 대상 채널을 선택합니다.

계속하려면 허용 버튼을 클릭하십시오. 수신 Webhook 페이지로 돌아가 Webhook URL을 복사합니다.

터미널로 돌아가서 /etc/netdata 디렉터리로 전환합니다.

$ cd /etc/netdata

Netdata는 Netdata 구성 파일을 편집하고 생성하는 edit-config 스크립트를 제공합니다. 다음 파일을 실행하여 시스템 기본 편집기를 사용하여 health_alarm_notify.conf 파일을 만들고 엽니다.

$ sudo ./edit-config health_alarm_notify.conf

다음 섹션으로 스크롤하십시오.

# Enable slack notification
SEND_SLACK="YES"

# Select the slack webhook
SLACK_WEBHOOK_URL="https://hooks.slack.com/services/xxxxxxx"

# Default channel for notification
DEFAULT_RECIPIENT_SLACK="notifications"

SEND_SLACK 변수가 yes로 설정되어 있는지 확인하십시오. 복사한 웹훅 URL을 SLACK_WEBHOOK_URL 변수에 붙여넣습니다. DEFAULT_RECIPIENT_SLACK 변수에 채널 이름을 입력합니다.

편집기가 Vim인 경우 Esc 키를 눌러 편집을 종료하고 :x를 입력한 다음 Enter 키를 눌러 파일을 저장하고 편집기를 종료합니다.

편집기가 Nano인 경우 Ctrl + X를 누르고 프롬프트가 표시되면 Y를 입력하여 파일을 저장합니다.

변경 사항을 적용하려면 Netdata를 다시 시작하십시오.

$ sudo systemctl restart netdata

이메일 알림 구성

Netdata는 기본적으로 sendmail을 사용하여 이메일 알림을 보내지만 이메일 서버를 관리하는 것은 쉬운 일이 아닙니다. Netdata는 SMTP를 지원하지 않지만 msmtp 클라이언트라는 패키지를 설치할 수 있습니다. SMTP 서버로 메일을 보낼 수 있습니다.

msmtp를 설치합니다.

$ sudo dnf install msmtp

msmtp에 대한 구성 파일을 만들고 엽니다.

$ sudo nano /etc/msmtprc

다음 코드를 붙여넣습니다.

# Set default values for all following accounts.
defaults

# Use the mail submission port 587 instead of the SMTP port 25.
port 587

# Always use TLS.
tls on

# The SMTP server of your ISP
account ses
host email-smtp.<location>.amazonaws.com
from 
auth on
user <yoursesusername>
password <yoursespassword>

# Set default account to isp
account default: ses

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

편집을 위해 /etc/netdata/health_alarm_notify.conf 파일을 엽니다.

$ sudo nano /etc/netdata/health_alarm_notify.conf

다음 섹션까지 아래로 스크롤하고 msmtp의 경로를 입력합니다.

# external commands

# The full path to the sendmail command.
# If empty, the system $PATH will be searched for it.
# If not found, email notifications will be disabled (silently).
sendmail="/usr/bin/msmtp"

다음 섹션을 찾아 보낸 사람과 받는 사람의 세부 정보를 입력하고 이메일 전송이 활성화되어 있는지 확인합니다.

# email global notification options

# multiple recipients can be given like this:
#              " ..."

# the email address sending email notifications
# the default is the system user netdata runs as (usually: netdata)
# The following formats are supported:
# EMAIL_SENDER=""
# EMAIL_SENDER="User Name <>"
# EMAIL_SENDER="'User Name' <>"
# EMAIL_SENDER="\"User Name\" <>"
EMAIL_SENDER="Server Admin <>"

# enable/disable sending emails
SEND_EMAIL="YES"

# if a role recipient is not configured, an email will be send to:
DEFAULT_RECIPIENT_EMAIL=""
# to receive only critical alarms, set it to "root|critical"

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

8단계 - 알림 채널 테스트

Slack 알림이 작동하는지 테스트해 보겠습니다.

설치 중에 생성된 시스템 사용자 netdata로 로그인합니다.

$ sudo su -s /bin/bash netdata

알람 알림 스크립트를 실행하여 테스트 알림을 보냅니다.

$ /usr/libexec/netdata/plugins.d/alarm-notify.sh test

사용자를 종료합니다.

$ exit.

Slack 애플리케이션을 열면 다음과 같은 알림을 받았을 것입니다.

또한 테스트 경고에 대한 세 개의 이메일을 받아야 합니다.

9단계 - 시스템 모니터링 구성

이제 알림을 구성하고 테스트했으므로 CPU 사용량과 같은 시스템에 대한 알림을 구성하고 테스트해 보겠습니다.

다음 명령을 실행하여 CPU 구성 파일을 만들고 엽니다.

$ cd /etc/netdata
$ sudo ./edit-config health.d/cpu.conf

아래와 같이 10min_cpu_usage 아래의 warn 및 crit 옵션 값을 변경합니다.

warn: $this > (($status >= $WARNING)  ? (60) : (70))
crit: $this > (($status == $CRITICAL) ? (75) : (85))

파일을 저장하고 편집기를 종료합니다.

위의 설정은 CPU 사용량이 60%에서 70% 사이로 떨어지면 경고를 보내고 CPU 사용량이 75%에서 85% 사이로 떨어지면 심각한 경고를 보냅니다.

Netdata 서비스를 다시 시작하십시오.

$ sudo systemctl restart netdata

Stress 애플리케이션을 설치하여 설정을 테스트해 보겠습니다.

$ sudo dnf install stress

다음 명령을 실행하여 서버의 CPU 사용량을 급증시키십시오.

$ stress --cpu 2

5-10분 동안 실행 중인 명령을 그대로 두면 높은 CPU 사용량 메시지가 표시됩니다. 이러한 메시지를 받으면 터미널로 돌아가서 Ctrl + Z를 눌러 명령을 종료합니다.

서비스를 중지하면 Slack에서 CPU 복구 알림을 받게 됩니다.

10단계 - Nginx 모니터링 구성

Netdata를 사용하여 가장 일반적으로 모니터링되는 앱 중 하나는 서버 및 SQL 패키지입니다. Netdata를 사용하여 Nginx 서버를 모니터링할 수 있습니다.

Nginx 서버 모니터링을 활성화하려면 ngx_http_stub_status_module을 사용해야 합니다. 일반적으로 Nginx와 함께 사전 설치되어 제공됩니다. 모듈이 있는지 확인할 수 있습니다.

$ nginx -V 2>&1 | grep -o with-http_stub_status_module
with-http_stub_status_module

응답이 없으면 Nginx 설치가 해당 기능을 지원하지 않는다는 의미입니다. 이 경우 Nginx를 컴파일해야 합니다.

편집을 위해 Nginxs 기본 구성 파일 /etc/nginx/conf.d/default.conf를 엽니다. 공식 저장소에서 Nginx를 설치했기 때문에 파일 위치가 다릅니다. OS 저장소에서 Nginx를 설치하는 경우 파일 위치는 /etc/nginx/nginx.conf입니다.

$ sudo nano /etc/nginx/conf.d/default.conf

마지막 닫는 중괄호 앞의 서버 블록 내부에 다음 코드를 입력합니다.

# Enable module stub_status
location /stub_status {
	stub_status;
    allow 127.0.0.1;        #only allow requests from localhost
    deny all;               #deny all other hosts
}

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

Nginx 구성을 확인합니다.

$ sudo nginx -t
nginx: the configuration file /etc/nginx/nginx.conf syntax is ok
nginx: configuration file /etc/nginx/nginx.conf test is successful

Nginx 서버를 다시 시작합니다.

$ sudo systemctl restart nginx

Netdata 서비스를 다시 시작하십시오.

$ sudo systemctl restart netdata

Netdata 대시보드에 Nginx 연결 세부 정보가 표시되어야 합니다.

Nginx 로그 모니터링

Netdata는 Nginx 액세스 로그도 모니터링할 수 있습니다. 그렇게 하려면 Netdata 디렉토리로 전환하십시오.

$ cd /etc/netdata

다음 명령을 실행하여 액세스 로그 모니터링을 위한 구성 파일을 생성합니다.

$ sudo ./edit-config python.d/web_log.conf

파일 맨 아래로 스크롤하여 다음 섹션을 찾으십시오.

# -------------------------------------------
# nginx log on various distros

# debian, arch
nginx_log:
  name: 'nginx'
  path: '/var/log/nginx/access.log'

# gentoo
nginx_log2:
  name: 'nginx_site'
  path: '/var/log/nginx/localhost.access_log'

각 로그 파일을 모니터링할 경로를 변경합니다. 많은 섹션을 추가하여 많은 호스트와 해당 액세스 로그 파일을 모니터링할 수 있습니다. 구성 파일은 다음과 같습니다.

# -------------------------------------------
# nginx log on various distros

# debian, arch
nginx_log:
  name: 'nginx'
  path: '/var/log/nginx/access.log'

nginx_log2:
  name: 'nginx_site1'
  path: '/var/log/nginx/site1.access_log'

nginx_log3:
  name: 'nginx_site2'
  path: '/var/log/nginx/site2.access_log'

nginx_log4:
  name: 'nginx_site3'
  path: '/var/log/nginx/site3.access_log'

편집기를 저장하고 종료합니다.

로그 파일에 액세스하려면 Netdata에 디렉토리 액세스 권한이 필요합니다. 기본적으로 adm 시스템 그룹에는 로그 파일에 대한 액세스 권한이 있습니다. Netdata 액세스 권한을 부여하려면 netdata 사용자를 adm 그룹에 추가해야 합니다.

$ sudo usermod -aG adm netdata

Nginx 및 Netdata 서비스를 다시 시작합니다.

$ sudo systemctl restart nginx netdata

로그 파일 데이터를 보려면 Netdata 대시보드를 다시 로드하십시오.

11단계 - MySQL/MariaDB 모니터링 구성

튜토리얼을 위해 MariaDB를 설치합니다. MySQL 서버를 사용하는 경우 단계는 동일하게 유지됩니다.

MariaDB 10.6용 리포지토리를 추가합니다.

$ sudo nano /etc/yum.repos.d/MariaDB.repo

다음 코드를 붙여넣습니다.

# MariaDB 10.6 CentOS repository list - created 2022-04-12 11:12 UTC
# https://mariadb.org/download/
[mariadb]
name = MariaDB
baseurl = https://download.nus.edu.sg/mirror/mariadb/yum/10.6/centos8-amd64
module_hotfixes=1
gpgkey=https://download.nus.edu.sg/mirror/mariadb/yum/RPM-GPG-KEY-MariaDB
gpgcheck=1

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

MariaDB를 설치합니다.

$ sudo dnf install MariaDB-server

MariaDB 서버를 활성화합니다.

$ sudo systemctl enable mariadb

MySQL 보안 설치 스크립트를 시작합니다. MariaDB의 경우 파일명이 다릅니다.

$ sudo mariadb-secure-installation
....
Enter current password for root (enter for none): (Press Enter)
....
Switch to unix_socket authentication [Y/n] Y (Type Y and Press Enter)
....
Change the root password? [Y/n] Y (Type Y and Press Enter)
New password: 
Re-enter new password: 
Password updated successfully!
....
Remove anonymous users? [Y/n] Y (Type Y and Press Enter)
....
Disallow root login remotely? [Y/n] Y (Type Y and Press Enter)
....
Remove test database and access to it? [Y/n] Y (Type Y and Press Enter)
....
Reload privilege tables now? [Y/n] Y (Type Y and Press Enter)
....
All done!  If you've completed all of the above steps, your MariaDB
installation should now be secure.

Thanks for using MariaDB!

편집을 위해 /etc/my.cnf.d/server.cnf 파일을 엽니다.

$ sudo nano /etc/my.cnf.d/server.cnf

파일에서 [mariadb] 섹션을 찾아 아래와 같이 다음 줄을 붙여넣어 Userstats 플러그인을 활성화합니다. 이 설정은 MySQL 서버가 아닌 MariaDB에서만 작동합니다.

[mariadb]
userstat = 1

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

MariaDB 서버를 시작합니다.

$ sudo systemctl start mariadb

Netdata 서비스를 다시 시작하십시오.

$ sudo systemctl restart netdata

MariaDB/MySQL 대시보드가 Netdata 대시보드에 나타나기 시작해야 합니다.

12단계 - PHP-FPM 모니터링 구성

Netdata를 사용하여 하나 이상의 PHP-FPM 인스턴스를 모니터링할 수 있습니다. 자습서에서는 PHP 8.0을 설치한 다음 모니터링을 활성화합니다.

Remi 저장소를 사용하여 PHP를 설치합니다. 3단계에서 이미 EPEL 저장소를 설치했습니다. Remi 저장소를 설치합니다.

$ sudo dnf install https://rpms.remirepo.net/enterprise/remi-release-8.rpm

사용 가능한 PHP 스트림을 확인하십시오.

$ dnf module list php -y
Last metadata expiration check: 0:00:12 ago on Fri 03 Dec 2021 09:39:32 AM UTC.
Rocky Linux 8 - AppStream
Name                Stream                 Profiles                                 Summary
php                 7.2 [d]                common [d], devel, minimal               PHP scripting language
php                 7.3                    common [d], devel, minimal               PHP scripting language
php                 7.4                    common [d], devel, minimal               PHP scripting language

Remi's Modular repository for Enterprise Linux 8 - x86_64
Name                Stream                 Profiles                                 Summary
php                 remi-7.2               common [d], devel, minimal               PHP scripting language
php                 remi-7.3               common [d], devel, minimal               PHP scripting language
php                 remi-7.4               common [d], devel, minimal               PHP scripting language
php                 remi-8.0               common [d], devel, minimal               PHP scripting language
php                 remi-8.1               common [d], devel, minimal               PHP scripting language

Hint: [d]efault, [e]nabled, [x]disabled, [i]nstalled

기본 버전은 7.2입니다. Remis PHP 8.0 저장소를 활성화합니다.

$ sudo dnf module reset php -y
$ sudo dnf module enable php:remi-8.0

다음으로 Firefly III에 필요한 PHP 및 확장 기능을 설치합니다. php 패키지에는 Firefly III에 필요한 몇 가지 종속성이 포함되어 있으므로 포함해야 합니다.

$ sudo dnf install php php-fpm php-mbstring php-xml php-curl php-mysqlnd php-zip php-intl php-bcmath php-gd php-ldap php-cli

설치를 확인하십시오.

$ php --version
PHP 8.0.16 (cli) (built: Feb 15 2022 21:34:32) ( NTS gcc x86_64 )
Copyright (c) The PHP Group
Zend Engine v4.0.16, Copyright (c) Zend Technologies
    with Zend OPcache v8.0.16, Copyright (c), by Zend Technologies

PHP 구성

/etc/php-fpm.d/www.conf 파일을 엽니다.

$ sudo nano /etc/php-fpm.d/www.conf

PHP 프로세스의 Unix 사용자/그룹을 nginx로 설정해야 합니다. 파일에서 user=www-data 및 group=www-data 줄을 찾아 nginx 로 변경합니다. 코드.

...
; Unix user/group of processes
; Note: The user is mandatory. If the group is not set, the default user's group
;       will be used.
; RPM: apache user chosen to provide access to the same directories as httpd
user = nginx
; RPM: Keep a group allowed to write in log dir.
group = nginx
...

파일을 아래로 스크롤하여 ;pm.status_path = /status 옵션을 찾습니다. 아래와 같이 줄 앞에 있는 세미콜론을 제거하여 줄의 주석 처리를 해제합니다.

; Note: There is a real-time FPM status monitoring sample web page available
;       It's available in: @/fpm/status.html
;
; Note: The value must start with a leading slash (/). The value can be
;       anything, but it may not be a good idea to use the .php extension or it
;       may conflict with a real PHP file.
; Default Value: not set
pm.status_path = /status

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

PHP 서비스를 활성화하고 시작합니다.

$ sudo systemctl enable php-fpm --now

Nginx에 PHP 설정 추가

편집을 위해 Nginxs 기본 구성 파일 /etc/nginx/conf.d/default.conf를 엽니다.

$ sudo nano /etc/nginx/conf.d/default.conf

마지막 닫는 중괄호 앞의 서버 블록 내부에 다음 코드를 입력합니다.

# define PHP-FPM monitoring
location ~ ^/(status|ping)$ {
    allow 127.0.0.1;
    fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
    fastcgi_index index.php;
    include fastcgi_params;
    fastcgi_pass   unix:/run/php-fpm/.sock; # Depends on the PHP Version and OS Distro
}

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

Nginx 구성을 확인합니다.

$ sudo nginx -t
nginx: the configuration file /etc/nginx/nginx.conf syntax is ok
nginx: configuration file /etc/nginx/nginx.conf test is successful

Nginx 서버를 다시 시작합니다.

$ sudo systemctl restart nginx

Netdata 서비스를 다시 시작하십시오.

$ sudo systemctl restart netdata

Netdata 대시보드를 다시 로드하면 PHP-FPM 통계가 표시됩니다.

13단계 - Docker 엔진 및 컨테이너 모니터링 구성

Netdata는 Docker 엔진과 Docker 컨테이너를 모두 모니터링할 수 있습니다. 또한 이러한 컨테이너 내에서 실행되는 앱을 모니터링할 수 있지만 이 자습서에서는 다루지 않습니다.

먼저 도커를 설치합시다.

$ sudo dnf install yum-utils
$ sudo yum-config-manager \
    --add-repo \
    https://download.docker.com/linux/centos/docker-ce.repo
$ sudo dnf install docker-ce docker-ce-cli containerd.io

Docker 서비스를 활성화하고 시작합니다.

$ sudo systemctl enable docker --now

Docker 엔진을 모니터링하려면 Docker의 메트릭 기능을 활성화해야 합니다.

편집을 위해 /etc/docker/daemon.json 파일을 만들고 엽니다.

$ sudo nano /etc/docker/daemon.json

다음 코드를 붙여넣습니다.

{
  "metrics-addr" : "127.0.0.1:9323",
  "experimental" : true
}

Ctrl + X를 누르고 메시지가 표시되면 Y를 입력하여 파일을 저장합니다.

Netdata 및 Docker 서비스를 다시 시작합니다.

$ sudo systemctl restart docker netdata

Netdata 대시보드를 다시 로드하면 Docker 통계를 볼 수 있습니다.

메트릭 옵션이 Prometheus 대시보드용으로 만들어졌기 때문에 대시보드에 Prometheus Metrics라는 다른 항목이 표시됩니다.

다음 단계는 Docker 컨테이너를 모니터링하는 것입니다. Netdata는 cgroups라고 하는 제어 그룹을 사용하여 Docker 컨테이너를 모니터링합니다. 제어 그룹은 프로세스 모음(이 경우 컨테이너)의 리소스 사용량을 제한하고 추적하는 Linux 기능입니다. Netdata를 설치할 때 실행 중인 Docker 컨테이너가 있으면 자동으로 추적됩니다. 그러나 Netdata를 설치한 후 컨테이너를 실행하면 다시 시작해야 합니다.

테스트 컨테이너를 실행합니다.

$ docker container run -d nginx

컨테이너의 상태를 확인합니다.

$ docker ps
CONTAINER ID   IMAGE     COMMAND                  CREATED         STATUS         PORTS     NAMES
938b2cf30927   nginx     "/docker-entrypoint.…"   3 seconds ago   Up 2 seconds   80/tcp    pensive_lovelace

컨테이너 이름은 표시된 대로 tender_murdock입니다. Netdata 설치 후 컨테이너가 시작되었으므로 서비스를 다시 시작하십시오.

$ sudo systemctl restart netdata

대시보드를 로드하면 컨테이너 통계를 볼 수 있어야 합니다.

결론

이것으로 Rocky Linux 서버에서 Nginx, MySQL, PHP-FPM 및 Docker와 같은 다양한 앱을 모니터링하기 위해 Netdata 모니터링 시스템을 설치하고 사용하는 방법에 대한 자습서를 마칩니다. 질문이 있으시면 아래 의견에 게시하십시오.