Nginx

نوامبر

web server چیست؟ به طور کلی هر چیز ( نرم افزاری یا سخت افزاری ) که داده ای را از طریق اینترنت یا شبکه به کاربر منتقل کند web server نامیده می شود.

nginx نامweb server/reverse proxy ی سبکی است که در سال ۲۰۰۲ به علت مشکل تعداد درخواست زیاد در سایت روسی http://www.rambler.ru شکل گرفت و در سال ۲۰۰۴ اولین نسخه رسمی خود را انتشار داد. تا کنون این وب سرور 11.28%. از سهم تمام وب سرور های دنیا را در دست دارد.

این وب سرور که هر روز جمع بیشتری از آن استفاده می کنند Wordpress.com را لیست استفاده کننده گان خود دارد.

از نکات مهم این وب سرور این است که بر روی سیستم عامل های windows linux Bsd و osx به راحتی نصب می شود

در این سیستم استفاده از روش asynchronous event-driven است که باعث شده که به میزان استفاده ثابت از RAM برسیم.

asynchronous event-driven چیست؟

وب سرور ها به طریق مختلفی اقدام به مدیریت درخواست ها (connection ) می کنند

برای هر درخواست یک process جدید درست می کنند
برای هر درخواست یک process جدید درست می کنند در حالی که سیستم connection poll هم دارند که تا مدتی process ها را نگه می دارد و در صورتی که در آن زمان درخواست جدیدی بیاید از process های بیکار استفاده می کنند
برای هر درخواست یک thread جدید درست می کنند
برای هر درخواست یک thread جدید درست می کنند در حالی که سیستم thread poll هم دارند که تا مدتی thread ها را نگه می دارد و در صورتی که در آن زمان درخواست جدیدی بیاید از thread های بیکار استفاده می کنند
یک process همه event ها را مدیریت می کند. (قبول درخواست، پاسخ به کاربر، خواندن داده و … )
ترکیبات روش ها

Nginx از روش چهارم استفاده می کند به همراه ساخت process برای مجموعه از event ها … البته مقداری مشخص را در config مشخص می کند. همه این ها برای این است که بیشترین استفاده را از سیستم خود بکنیم.

به طور کلی باز کردن process و thread هزینه بر است و از آن مهمتر مدیریت اینهاست. وب سرورهایی شبیه Apache که process و thread هستند با درخواست های زیاد به شدت درگیر مدیریت process و thread می شوند که در نتیجه فشار زیاد تری به سرور می آورند

http://www.devside.net/articles/apache-performance-tuning
The more RAM your system has, the more processes [and threads] Apache can allocate and use; which directly translates into the amount of concurrent requests/clients Apache can serve.

ارتباط مستقیمی بین RAM و درخواست ها در این وب سرور ها وجود دارد که در روش nginx تا جای ممکن از استفاده ی اضافه آن جلوگیری شده است.

توضیح دیگری را دیدم که جالب به نظر می رسید.#

فکر کنید که وب سرور یک پیتزا فروشیست که باید سفارش ها را از طریق تلفن دریافت کند. در روش process و thread فروشگاه کارمند استخدام می کند (process و thread) که هرکدامشان یک خط تلفن دارند و هر کدام سفارش را از طریق تلفن می گیرند و صبر می کنند تا پیتزا حاضر شود تا به مشتری بگویند ( هنوز تلفن قطع نشده) پیتزای شما حاضر است.

در روش Nginx فقط تعداد محدودی کارمند استخدام می شود که تلفن ها را پاسخ می دهد و می گوید به محض حاضر شدن به شما می گوییم. و وقتی حاضر شد زنگ می زند.

nginx چه کارهایی بلد است؟

nginx علاوه بر این که یک وب سرور است reverse proxy و e-mail (IMAP/POP3) proxy هم هست … علاوه بر درخواست های http در خواست های مربوط به IMAP و POP3 هم می تواند از امکانات nginx استفاده کند. در این روش شما می توانید از روش ها loadbalancing و چیزهایی از این قبیل برای ایمیل استفاده کنید. البته شما می توانید حتی کارهای عجیب غریبی مثل authentication mail را هم از طریق nginx انجام دهید.

reverse proxy درخواست های بیرونی را به صورت صف شده و جاهای مختلف می فرستد

reverse proxy ها موجودی سرور های شما را مخفی می کنند و همه ی دنیا شما را از دریچه reverse proxy می بینند.
تمام درخواست ها از reverse proxy می گذرد پس جای مناسبی برای firewall ها و … است
reverse proxy درخواست ها به صورت گسترده ای می تواند پخش کند.
reverse proxy فشار را با cache کردن محتوای صفحات ثابت می تواند کم کند
reverse proxy با فشرده سازی محتوای خروجی سرور ها می تواند زمان درخواست ها را کم کرده و پاسخ به درخواست ها را سریع تر کند.
درخواست ها بین سرور reverse proxy و سرور اصلی به سرعت انجام می شود و connection در reverse proxy باز می ماند و سرور اصلی در گیر نمی شود. ( روش SpoonFeeding )

نصب Nginx:

از سایت http://nginx.org/en/download.html نسخه آخر را دریافت کنید ( که در این مقاله nginx-1.0.6 است)

فایل فشرده شده را باز کنید.

وارد پوشه شوید و از دستور ./configure برای چک کردن نیازمندی ها و ساخت makefile

با دستور make install وب سرور شما نصب می شود. به صورت پیش فرض در آدرس /usr/local/nginx/ قرار می گیرد. برای اجرای وب سرور فایل nginx را اجرا کنید.

/usr/local/nginx/sbin/nginx

حالا port 80 localhost خود را در مروگری چک کنید.

وب سرور شما با موفقیت نصب و اجرا شد.

برای تست وب سرور با پایتون نیاز یک منتقل Web Server Gateway Interface احتیاج داریم که درخواست های ما را به پایتون بدهد. ما برای این کار از uwsgi استفاده می کنیم. خوشبختانه از 0.8.40# به صورت پیشفرض تنظیماتش اضافه شده است.

برای شروع باید uwsgi را نصب کنید.

از سایت اصلی دانلود کنید http://projects.unbit.it/downloads/uwsgi-0.9.9.tar.gz بعد از خارج کردن از حالت فشرده آن را compile کنید . دقت کنید که برای اینکه بتوانید این ماژول c و پایتونی را کامپایل کنید می بایستی python-dev را هم نصب کنید.

من یک پوشه به اسم /srv/www/zconf/ می سازم که در آن ۲ پوشه وجود دارد

در پوشه application من برنامه ای که از فریم ورک flask# استفاده کرده است گذاشتم و در پوشه دیگر هم logfile مربوط به uwsgi و access مربوط به nginx را گذاشته ام.

برنامه ما حالت بسیار ساده ای دارد که فقط درخواست را می گیرد و بدون هیچ cache ای محتوا را بر می گرداند.

#!/usr/bin/env python
# -*- encoding: utf-8 -*-  
\"\"\"
  app.py
~~~~~~~~~
\"\"\"
from flask import Flask
from flask import render_template_string
from werkzeug.contrib.fixers import ProxyFix

app = Flask(__name__)
@app.route(\'/\')
def index():
   return render_template_string(\'<h1>Hello Zconf</h1>\')

app.wsgi_app = ProxyFix(app.wsgi_app)

در فایل تنظیمات مربوط به nginx هم می بایستی بگوییم که از uwsgi بخواند.

فایل تنظیمات Nginx:

#user  nobody;

worker_processes  1;

میزان process ی که nginx می تواند باز کند اینجا مشخص می شود

#error_log  logs/error.log;

#error_log  logs/error.log  notice;

#error_log  logs/error.log  info;

مسیر پیشرفض error ها و نوع error ها در اینجا مشخص می شود

events {

   worker_connections  1024;

}

تعداد events هایی که یک process می تواند مدیریت کند

پس می توان گفت تعداد connection ها ضرب بین این متغیر و تعداد process هاست

http {

   include       mime.types;

مسیری که mime ها را از آن می خواند

   default_type  application/octet-stream;

نوع پیشفرض mime ی که استفاده می شود

#log_format  main  \'$remote_addr - $remote_user [$time_local] \"$request\" \'

#                  \'$status $body_bytes_sent \"$http_referer\" \'

#                  \'\"$http_user_agent\" \"$http_x_forwarded_for\"\';

قالب log

   #access_log  logs/access.log  main;

log مربوط به درخواست ها

   sendfile        on;

درخواست های مربوط به فایل را قبول کند یا نه

   #tcp_nopush     on;

HTTP response header را با یک پکت ارسال م یکند

   #keepalive_timeout  0;

   keepalive_timeout  65;

میزان زمانی که می خواهیم connection باز باشد تا جواب داده شود

   server {

       listen       80;

port پیشفرض

       server_name  localhost;

اسم سرور

       #charset koi8-r;

charset پیشفرض

#access_log  logs/host.access.log  main;

    location / {

   include uwsgi_params;

در اینجا من می گویم که از فایل uwsgi_params که به صورت پیشفرض در پوشه conf داری تنظیمات خود را بخوان

   uwsgi_pass 127.0.0.1:3031;

آدرسی که از آن می توانی درخواست ها را بخوانی

        }

       error_page   500 502 503 504  /50x.html;

       location = /50x.html {

           root   html;

       }

   }

}

همونطور که دیدید من درخواست های مربوط به port ۸۰ را به uwsgi دادم. در این مرحله باید با به uwsgi بگوییم که در پورت مورد نظر اجرا شود

# uwsgi --socket 127.0.0.1:3031 --file application/app.py --callable app --processes 4 --daemonize logs/uwsgi.log

حالا سرور nginx را kill کنید و دوباره startکنید

وب سرور شما به خوبی توانست درخواست را از فایل پایتون بگیرد و نمایش دهد.

بنچمارک nginx

در این مرحله با apache benchmark به تعداد ۱۰۰۰۰۰ درخواست را به سرور می فرستیم که نتیجه کار را ببینیم

efazati@efazati-PA65-UD3-B3:~$ ab -n 100000 -c 10 -g test_data_1.txt http://zconf/

This is ApacheBench, Version 2.3 <$Revision: 655654 $>

Copyright 1996 Adam Twiss, Zeus Technology Ltd, http://www.zeustech.net/

Licensed to The Apache Software Foundation, http://www.apache.org/

Benchmarking zconf (be patient)

Completed 10000 requests

Completed 20000 requests

Completed 30000 requests

Completed 40000 requests

Completed 50000 requests

Completed 60000 requests

Completed 70000 requests

Completed 80000 requests

Completed 90000 requests

Completed 100000 requests

Finished 100000 requests

Server Software:        nginx/1.0.6

Server Hostname:        zconf

Server Port:            80

Document Path:          /

Document Length:        20 bytes

Concurrency Level:      10

Time taken for tests:   19.961 seconds

Complete requests:      100000

Failed requests:        0

Write errors:           0

Total transferred:      17600000 bytes

HTML transferred:       2000000 bytes

Requests per second:    5009.86 [#/sec] (mean)

Time per request:       1.996 [ms] (mean)

Time per request:       0.200 [ms] (mean, across all concurrent requests)

Transfer rate:          861.07 [Kbytes/sec] received

Connection Times (ms)

             min  mean[+/-sd] median   max

Connect:        0    0   0.0      0       0

Processing:     1    2   1.5      2      35

Waiting:        1    2   1.5      2      35

Total:          1    2   1.5      2      35

Percentage of the requests served within a certain time (ms)

 50%      2

 66%      2

 75%      2

 80%      2

 90%      2

 95%      3

 98%      6

 99%     12

100%     35 (longest request)

همانطور که دقت می کنید با اینکه Concurrency برابر ۱۰ بود زمان connection زمانی معادل ۰ داشته

از طرفی هم نمودار های دیگری نیز وجود دارد که استفاده از آنها خالی از لطف نیست.

در مجموع نصب کردن و کار کردن به این وب سرور کار راحتی است و با رشدی که دارد پیش بینی می کنم در آینده درصد بیشتری از سهم وب سرور ها را به خود اختصاص دهد.

منابع:

http://articles.slicehost.com/nginx

http://articles.slicehost.com/2009/8/14/debian-lenny-nginx-configuration

http://wiki.nginx.org

http://articles.slicehost.com/2009/3/4/ubuntu-intrepid-installing-nginx-from-source

http://wiki.nginx.org/Install

http://wiki.nginx.org/NgxWSGIModule

http://library.linode.com/web-servers/nginx/python-uwsgi/debian-6-squeeze

http://wirtel.be/2011/02/24/nginx_gunicorn_flask/

http://brandonkonkle.com/blog/2010/sep/14/django-uwsgi-and-nginx/

http://en.wikipedia.org/wiki/Nginx

http://projects.unbit.it/uwsgi/wiki

http://projects.unbit.it/uwsgi/wiki/Doc

http://projects.unbit.it/uwsgi/wiki/RunOnNginx

http://library.linode.com/web-servers/nginx/configuration/basic

http://www.baus.net/on-tcp_cork

http://en.wikipedia.org/wiki/Web_server_benchmarking

http://en.wikipedia.org/wiki/Reverse_proxy

http://en.wikipedia.org/wiki/Proxy_server

http://www.webfaction.com/blog/nginx-apache-memory.png

https://farm4.static.flickr.com/3241/2298693485_df1606c495.jpg?v=0

http://www.ehow.com/list_6183870_list-server-software.html

منبع اصلی نوشتار زیر در این لینک قرار دارد

Nginx