Nginx 뒤에 Gunicorn HTTP 서버를 사용하여 Python WSGI 앱을 배포하는 방법
소개
아마도 Python 웹 서버 비교에 대한 기사에서 전환하도록 유혹했거나 단순히 현재 애플리케이션 배포 스택을 능가했다는 사실 때문일 수 있습니다. Gunicorn 웹 서버에 대해 자세히 알아보고 처음부터 Python 애플리케이션을 철저히 배포하는 방법을 배우고 싶습니다.
이 DigitalOcean 기사에서 우리의 목표는 위의 모든 사항과 일부를 지원하는 것입니다. 뛰어난 Gunicorn WSGI HTTP Server에 대한 지식을 확장하는 것부터 시작하여 다양한 인기 프레임워크 위에 구축된 Python WSGI 웹 애플리케이션을 계속 배포할 것입니다.
용어 사전
1. Gunicorn과 Nginx에 대하여
- 거니콘
- Nginx를 사용한 웹 애플리케이션 배포
2. 생산을 위한 물방울 준비
- 기본 운영 체제 업데이트
- Python, pip 및 virtualenv 설정
- 가상(Python) 환경 만들기
- Gunicorn 다운로드 및 설치
- Nginx 다운로드 및 설치
3. Gunicorn으로 Python 웹 애플리케이션 제공
- WSGI
- WSGI 애플리케이션 개체(호출 가능): wsgi.py
- 서버 실행
- Gunicorn 구성 및 최적화
- Nginx 구성
- 기타 팁 및 제안
Gunicorn 및 Nginx 정보
거니콘
Gunicorn은 많은 기능을 제공하는 독립형 WSGI 웹 애플리케이션 서버입니다. 기본적으로 어댑터와 함께 다양한 프레임워크를 지원하므로 개발 중에 사용되는 많은 개발 서버에 대한 드롭인 교체를 매우 쉽게 사용할 수 있습니다.
기술적으로 Gunicorn의 작동 방식은 성공적인 Ruby 애플리케이션용 Unicorn 웹 서버와 매우 유사합니다. 둘 다 프리포크 모델이라고 하는 것을 사용합니다. 이것은 본질적으로 작업자 관리, 소켓 및 바인딩 생성 등을 처리하기 위해 중앙 [Gunicorn] 마스터 프로세스에 작업을 할당합니다.
Gunicorn 서버 하이라이트
- 모든 WSGI Python 웹 애플리케이션(및 프레임워크) 실행\n
- Paster(Pyramid), Django의 개발 서버, web2py 등의 대체품으로 사용할 수 있습니다.\n
- 다양한 작업자 유형 및 구성 제공\n
- 작업자 프로세스를 자동으로 관리\n
- 동기식 및 비동기식 작업자를 통한 HTTP/1.0 및 HTTP/1.1(Keep-Alive) 지원\n
- SSL 지원
- 후크로 확장 가능\n
- Python 2.6+ 및 3.x 지원
Nginx를 사용한 웹 애플리케이션 배포
Nginx는 고성능 웹 서버/(역) 프록시입니다. 가볍고 상대적으로 작업하기 쉬우며 확장(애드온/플러그인 사용)이 쉽기 때문에 현재 인기를 얻고 있습니다. 아키텍처 덕분에 응용 프로그램이나 웹 사이트 로드에 따라 다른 오래된 대안을 사용하여 처리하기 정말 어려울 수 있는 많은 요청(사실상 무제한)을 처리할 수 있습니다.
기억하세요: "연결 처리\는 기술적으로 연결을 끊지 않고 무언가로 연결을 제공할 수 있음을 의미합니다. Nginx가 오류가 아닌 응답을 클라이언트에 제공하려면 애플리케이션과 데이터베이스가 잘 작동해야 합니다. 메시지.
애플리케이션 서버 앞에서 리버스 프록시로 Nginx를 사용하는 이유는 무엇입니까?
많은 프레임워크와 애플리케이션 서버(Gunicorn 포함)는 응답과 함께 정적 파일(예: javascript, css, 이미지 등)을 제공할 수 있습니다. 그러나 더 나은 방법은 Nginx와 같은 (역 프록시) 서버가 이러한 파일을 제공하고 연결(요청)을 관리하는 작업을 처리하도록 하는 것입니다. 이렇게 하면 애플리케이션 서버의 많은 부하가 줄어들어 훨씬 더 나은 전체 성능을 얻을 수 있습니다.
애플리케이션이 성장함에 따라 애플리케이션을 최적화하고 싶을 것입니다. 때가 되면 서버(VPS)에 분산하여 더 많은 연결을 동시에 처리할 수 있도록(그리고 일반적으로 더 강력한 아키텍처를 갖도록) 합니다. 응용 프로그램 서버 앞에 리버스 프록시가 있으면 처음부터 도움이 됩니다.
Nginx의 확장성(예: 장애 조치 및 기타 메커니즘과 함께 기본 캐싱)은 또한 (더 간단한) 애플리케이션 서버와 달리 웹 애플리케이션에 이점을 제공하는 뛰어난 기능입니다.
기본 서버 아키텍처의 예:
Client Request ----> Nginx (Reverse-Proxy)
|
/|\
| | `-> App. Server I. 127.0.0.1:8081
| `--> App. Server II. 127.0.0.1:8082
`----> App. Server III. 127.0.0.1:8083
참고: 사용할 서버/작업자 수에 대해 알아보려면 Gunicorn 구성 및 최적화 섹션을 참조하십시오.
생산을 위한 물방울 준비
이 섹션에서는 프로덕션(예: 애플리케이션 배포)을 위해 가상 환경을 준비할 것입니다.
우리는 다음과 같이 시작할 것입니다:
- 기본 운영 체제 업데이트
- 일반적인 Python 도구(예: pip, virtualenv) 다운로드 및 설치
- 애플리케이션을 포함할 가상 환경 생성(Gunicorn과 같은 종속성이 있는 내부)\n
참고: 여기에 제공된 지침은 간략하게 유지됩니다. 자세한 내용은 pip 및 virtualenv에 대한 방법 문서(공통 Python 도구: virtualenv 사용, Pip로 설치 및 패키지 관리)를 확인하십시오.
기본 운영 체제 업데이트
참고: 최신 버전의 운영 체제를 사용하여 새 드롭릿에서 다음 설정 및 준비를 수행할 것입니다. 이론적으로 VPS에서 시도하는 데 문제가 없어야 합니다. 그러나 이미 적극적으로 사용하고 계시다면 새로운 시스템으로 전환하는 것을 적극 권장합니다.
사용 가능한 최신 버전의 기본 응용 프로그램이 있는지 확인하려면 시스템을 업데이트해야 합니다.
Debian 기반 시스템(예: Ubuntu, Debian)의 경우 다음을 실행합니다.
aptitude update
aptitude -y upgrade
RHEL 기반 시스템(예: CentOS)의 경우 다음을 실행합니다.
yum -y update
Python, pip 및 virtualenv 설정
CentOS/RHEL 사용자 참고 사항:
기본적으로 CentOS/RHEL은 매우 적은 서버로 제공됩니다. 귀하의 필요에 따라 날짜가 변경될 수 있는 도구 세트는 애플리케이션을 실행하기 위한 것이 아니라 서버의 시스템 도구(예: YUM)에 전원을 공급하기 위한 것입니다.
CentOS 시스템을 준비하려면 Python을 설정(즉, 소스에서 컴파일)하고 pip/virtualenv를 해당 인터프리터를 사용하여 설치해야 합니다.
pip 및 virtualenv를 사용하여 CentOS 6.4 및 5.8에서 Python 2.7.6 및 3.3.3을 설정하는 방법에 대해 알아보려면 CentOS에서 Python 2.7.6 및 3.3.3을 설정하는 방법을 참조하십시오.
Ubuntu 및 Debian에서는 사용할 수 있는 최신 버전의 Python 인터프리터가 기본적으로 제공됩니다. 설치할 추가 패키지의 수가 제한되어 있습니다.
- python-dev(개발 도구),
- pip(패키지 관리용),
- virtualenv(격리된 가상 환경 생성).
파이썬 개발:
python-dev는 Python 모듈을 빌드하기 위한 확장된 개발 도구가 포함된 운영 체제 수준 패키지입니다.
aptitude를 사용하여 python-dev를 설치하려면 다음 명령을 실행하십시오.
aptitude install python-dev
씨:
pip는 필요한 애플리케이션 패키지를 설치하는 데 도움이 되는 패키지 관리자입니다.
다음 명령을 실행하여 pip를 설치합니다.
curl https://bitbucket.org/pypa/setuptools/raw/bootstrap/ez_setup.py | python -
curl https://raw.github.com/pypa/pip/master/contrib/get-pip.py | python -
export PATH="/usr/local/bin:$PATH"
sudo 권한이 필요할 수 있습니다.
가상 환경:
모든 종속성과 함께 자체 환경 내에 Python 애플리케이션을 포함하는 것이 가장 좋습니다. 환경은 모든 것이 상주하는 격리된 위치(디렉토리)로 가장 잘 설명될 수 있습니다(단순한 용어로). 이를 위해 virtualenv라는 도구가 사용됩니다.
pip를 사용하여 virtualenv를 설치하려면 다음을 실행하십시오.
sudo pip install virtualenv
독립형 가상(Python) 환경 만들기
필요한 모든 도구가 준비되면 애플리케이션을 배포할 환경을 만들 수 있습니다.
기억하세요: 프로젝트를 위한 개발(로컬) 컴퓨터에 virtualenv가 없는 경우 가상 환경을 만들고 애플리케이션(및 해당 종속성)을 내부로 이동하는 것을 고려해야 합니다.
가상 환경과 애플리케이션 모듈을 모두 포함할 폴더를 만드는 것으로 시작하겠습니다.
여기에서 필요에 맞게 이름을 사용할 수 있습니다.
mkdir my_app
계속해서 이 폴더에 들어가 내부에 새 가상 환경을 만들 수 있습니다.
가상 환경에 대해 원하는 이름을 선택할 수도 있습니다.
cd my_app
virtualenv my_app_venv
Python 애플리케이션 모듈도 포함할 새 폴더를 생성해 보겠습니다.
애플리케이션 모듈이 상주할 폴더입니다.
mkdir app
그리고 가상 환경 내에서 인터프리터를 활성화하여 사용하십시오.
"my_app_venv\가 아닌 다른 이름으로 이동한 경우 가상 환경에 선택한 이름을 사용해야 합니다.
source my_app_venv/bin/activate
최종적으로 기본 애플리케이션 배포 디렉터리는 다음과 같아야 합니다.
my_app # Main Folder to Contain Everything Together
|
|=== my_app_venv # V. Env. folder with the Python Int.
|=== app # Your application module
|..
|.
Gunicorn 다운로드 및 설치
가능한 한 가상 환경 내부에 모든 응용 프로그램 관련 요소를 함께 포함하는 것이 항상 권장되는 방법입니다. 따라서 그곳에서 Gunicorn을 다운로드하여 설치합니다.
환경 내에서 작업하지 않는 경우 Gunicorn은 전역적으로 설치됩니다(즉, 시스템 전체에서 사용 가능). 권장하지 않습니다. 항상 virtualenv를 사용하도록 선택하십시오.
pip를 사용하여 Gunicorn을 설치하려면 다음을 실행합니다.
pip install gunicorn
Nginx 다운로드 및 설치
CentOS/RHEL 사용자 참고 사항:
아래 지침은 CentOS 시스템에서 작동하지 않습니다. CentOS에 대한 지침은 여기를 참조하십시오.
다음 명령을 실행하여 기본 시스템 패키지 관리자 aptitude 설치 Nginx를 사용합니다.
sudo aptitude install nginx
Nginx를 실행하려면 다음을 사용할 수 있습니다.
sudo service nginx start
Nginx를 중지하려면 다음을 사용할 수 있습니다.
sudo service nginx stop
Nginx를 다시 시작하려면 다음을 사용할 수 있습니다.
Nginx를 재구성할 때마다 새 설정을 적용하려면 다시 시작하거나 다시 로드해야 합니다.
sudo service nginx restart
참고: Ubuntu의 Nginx에 대해 자세히 알아보려면 Ubuntu 12.04에 Nginx를 설치하는 방법 문서를 참조하십시오.
Gunicorn으로 Python 웹 애플리케이션 제공
이 섹션에서는 WSGI 애플리케이션이 Gunicorn과 함께 작동하는 방식을 살펴봅니다. 이 프로세스는 서버에 호출 가능한 WSGI 애플리케이션(예: application = (..))을 진입점으로 제공하는 것으로 구성됩니다.
WSGI
간단히 말해서 WSGI는 웹 서버와 애플리케이션 자체 간의 인터페이스입니다. 다양한 서버와 애플리케이션(프레임워크) 간의 표준화된 방식을 보장하기 위해 존재하며, 오늘날 필수 요구 사항인 필요한 경우(예: 개발 환경에서 프로덕션 환경으로 전환) 상호 교환성을 허용합니다.
참고: WSGI 및 Python 웹 서버에 대해 자세히 알아보려면 Python 기반 웹 애플리케이션에 대한 웹 서버 비교 기사를 확인하십시오.
WSGI 애플리케이션 객체(호출 가능): wsgi.py
위에서 언급했듯이 WSGI에서 실행되는 웹 서버에는 응용 프로그램 개체(즉, 응용 프로그램의 개체)가 필요합니다.
대부분의 프레임워크 및 애플리케이션에서 이는 다음으로 구성됩니다.
- 서버에서 사용할 응용 프로그램 개체(또는 호출 가능 항목)를 포함하고 제공하는 wsgi.py.
Gunicorn과 함께 사용할 예시적인 wsgi.py를 만드는 것으로 시작하겠습니다.
"wsgi.py\ 대신 아무 이름이나 선택할 수 있습니다. 그러나 일반적으로 사용되는 이름입니다(예: Django).
기본 WSGI 애플리케이션을 포함할 wsgi.py 파일을 만드는 것으로 시작하겠습니다.
다음 명령을 실행하여 텍스트 편집기 nano를 사용하여 wsgi.py를 생성합니다.
nano wsgi.py
계속해서 기본 WSGI 애플리케이션 코드를 내부로 이동(복사/붙여넣기)해 보겠습니다(프로덕션을 위해 자체 애플리케이션의 호출 가능 코드로 교체해야 함).
def application(env, start_response):
start_response('200 OK', [('Content-Type', 'text/html')])
return ["Hello!"]
이것은 서버에 의해 포함된 파일이며 요청이 올 때마다 서버는 URL(예: mysite.tld/controller/method/ 변수).
애플리케이션 코드를 배치한 후 CTRL+X를 누른 다음 Y로 확인하여 실제 애플리케이션을 포함하는 가상 환경 및 앱 모듈과 함께 "my_app” 폴더 안에 이 파일을 저장합니다.
참고: 이 WSGI 애플리케이션은 가장 기본적인 예입니다. 응용 프로그램 모듈에서 자신의 응용 프로그램 개체를 포함하려면 이 코드 블록을 교체해야 합니다.
작업이 완료되면 기본 애플리케이션 배포 디렉터리는 다음과 같이 표시됩니다.
my_app # Main Folder to Contain Everything Together
|
|=== my_app_venv # V. Env. folder with the Python Int.
|=== app # Your application module
|
|--- wsgi.py # File containing application callable
|..
|.
서버 실행
애플리케이션 제공을 시작하려면 다음을 실행하기만 하면 됩니다.
gunicorn [option] [option] .. [wsgi file]
다음을 실행하여 서버를 시작합니다.
gunicorn -b 0.0.0.0:8080 wsgi
포그라운드에서 서버를 실행합니다. 중지하려면 CTRL+C를 누르십시오.
백그라운드에서 서버를 실행하려면 다음을 실행하십시오.
gunicorn -b 0.0.0.0:8080 wsgi &
백그라운드에서 애플리케이션을 실행할 때 이를 종료(또는 중지)하려면 프로세스 관리자(예: htop)를 사용해야 합니다.
Gunicorn 구성 및 최적화
참고: 다음은 가장 일반적으로 사용되는 구성 및 최적화 설정 중 일부입니다. 사용 가능한 모든 옵션을 보려면 Gunicorn 구성 개요에 대한 공식 문서를 확인하십시오.
앞서 언급한 바와 같이 Gunicorn은 구성 가능성이 높으며 필요한 모든 매개변수를 원하는 방식으로 수정하기가 매우 쉽습니다.
[!] 중요: 아래에 나열된 모든 설정 및 구성 옵션은 gunicorn을 시작하고 응용 프로그램을 서버하기 위해 연결됩니다(하나씩 연결). 서버를 시작한 후에는 옵션을 수정할 수 없습니다. 어떤 옵션을 사용하든 응용 프로그램에 대한 진입 지점을 포함하는 wsgi 파일이 뒤에 와야 합니다.
예:
# Simply running the server (as shown above):
gunicorn -b 0.0.0.0:8080 wsgi
# Running the server with five workers:
gunicorn -b 0.0.0.0:8080 --workers=5 wsgi
작업자 수
일반적으로 응용 프로그램은 CPU 바인딩이 아니라 I/O 바인딩인 것으로 간주(및 허용)됩니다. 즉, 병목 현상은 가상 서버의 처리 능력이 아니라 디스크에 의해 발생합니다. 아이디어는 다음과 같습니다. 작업자가 디스크 작업으로 바쁠 때 다른 작업자는 여전히 요청을 처리하는 CPU를 사용합니다.
따라서 제안된 작업자 수는 일반적으로 다음과 같은 간단한 공식으로 설정됩니다.
# (2 Workers * CPU Cores) + 1
# ---------------------------
# For 1 core -> (2*1)+1 = 3
# For 2 cores -> (2*2)+1 = 5
# For 4 cores -> (2*4)+1 = 9
--workers=[n] 인수를 전달하여 작업자 수를 지정할 수 있습니다.
용법:
# Example: gunicorn --workers=[number of workers]
gunicorn --workers=5
참고: 위의 시나리오는 비차단 작업자에게 엄격하게 적용되지 않습니다.
소켓 설정
소켓 바인딩이 작동하는 방식은 다음과 같습니다.
# Example: gunicorn -b [address:port]
gunicorn -b 127.0.0.1:8080
참고: 응용 프로그램이 127.0.0.1에서 들어오는 연결을 수신하도록 설정되면 로컬에서만 액세스할 수 있습니다. 그러나 0.0.0.0을 사용하면 외부의 연결도 허용됩니다.
작업자 유형 선택
우리가 논의한 바와 같이 Gunicorn은 다양한 유형의 작업자와 함께 일할 수 있는 가능성을 제공했습니다.
대부분의 배포에서 표준 작업자 유형인 동기화로 충분하고 기본적으로 제공되므로 명시적인 설정이 필요하지 않습니다.
다른 작업자의 경우 종속 항목으로 설치해야 합니다.
용법:
# Example: gunicorn -k [worker]
gunicorn -k sync # or;
gunicorn -k gevent # ..
사용 가능한 유형:
- 동기화
- 이벤트
- 이벤트
- 토네이도
Eventlet/Gevent의 동시 연결 수
Eventlet 및 Gevent 작업자의 동시 연결 수를 수정하려면:
# Example: gunicorn -k [worker] --worker-connections [number]
gunicorn -k gevent --worker-connections 1001
액세스 로그
액세스 로그를 작성하도록 파일을 명시적으로 설정하려는 경우:
# Example: gunicorn --access-logfile [file]
gunicorn --access-logfile acclogs
기본적으로 이 옵션은 없음으로 설정되어 있습니다.
오류 로그
오류 로그를 쓸 파일을 지정하려면 이 설정을 사용합니다.
# Example: gunicorn --log-file [file]
gunicorn --log-file error_logs.log
로그 수준
오류 로그 출력의 세분성을 설정하는 데 사용됩니다. 가능한 옵션은 다음과 같습니다.
- 디버그
- 정보
- 경고
- 오류
- 중요
용법:
# Example: gunicorn --log-level [level]
gunicorn --log-level error
프로세스 명명
top과 같은 유틸리티를 사용하여 프로세스를 모니터링하는 경우 이 설정을 사용하여 작업에 도움이 되는 보다 의미 있는 이름을 지정할 수 있습니다.
# Example: gunicorn --name [name]
gunicorn --name my_application
Nginx 구성
Gunicorn 구성 및 실행에 대해 학습한 후 애플리케이션을 실행하는 Gunicorn 서버와 통신하기 위해 Nginx와 동일한 작업을 수행해야 합니다. 이를 위해 Nginx의 구성 파일인 nginx.conf를 수정해야 합니다.
다음 명령을 실행하여 "nginx.conf”를 열고 nano 텍스트 편집기를 사용하여 편집합니다.
sudo nano /etc/nginx/nginx.conf
그런 다음 파일을 다음 예제 구성으로 대체하여 Nginx가 애플리케이션과 통신하는 리버스 프록시로 작동하도록 할 수 있습니다.
참고: SSL 지원 통합에 대해 알아보려면 먼저 Nginx에서 SSL 인증서 생성 문서를 읽어보세요.
웹 애플리케이션의 구성 예:
worker_processes 1;
events {
worker_connections 1024;
}
http {
sendfile on;
gzip on;
gzip_http_version 1.0;
gzip_proxied any;
gzip_min_length 500;
gzip_disable "MSIE [1-6]\.";
gzip_types text/plain text/xml text/css
text/comma-separated-values
text/javascript
application/x-javascript
application/atom+xml;
# Configuration containing list of application servers
upstream app_servers {
server 127.0.0.1:8080;
# server 127.0.0.1:8081;
# ..
# .
}
# Configuration for Nginx
server {
# Running port
listen 80;
# Settings to serve static files
location ^~ /static/ {
# Example:
# root /full/path/to/application/static/file/dir;
root /app/static/;
}
# Serve a static file (ex. favico)
# outside /static directory
location = /favico.ico {
root /app/favico.ico;
}
# Proxy connections to the application servers
# app_servers
location / {
proxy_pass http://app_servers;
proxy_redirect off;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Host $server_name;
}
}
}
구성 수정을 마쳤으면 CTRL+X를 누르고 Y를 눌러 저장하고 종료합니다. 변경 사항을 적용하려면 Nginx를 다시 시작해야 합니다.
다음을 실행하여 Nginx를 다시 시작합니다.
sudo service nginx stop
sudo service nginx start
참고: Nginx에 대한 자세한 내용은 VPS에서 Nginx 웹 서버를 구성하는 방법 문서를 참조하십시오.
기타 팁 및 제안
방화벽:
- IP 테이블을 사용하여 방화벽 설정
SSH 보안:
- Ubuntu에서 fail2ban으로 SSH를 보호하는 방법
- CentOS 6에서 fail2ban으로 SSH를 보호하는 방법
경고 생성:
- 시스템 모니터링을 위해 CentOS VPS에서 이메일 알림을 보내는 방법
매일 서버 액세스 로그 모니터링 및 감시:
- Logwatch 로그 분석기 및 리포터 설치 및 사용 방법