壓力測試 php-fpm 最佳化

標籤：

webbench最多可以類比3萬個並發串連去測試網站的負載能力，個人感覺要比Apache內建的ab壓力測試工具好，安裝使用也特別方便。 　　1、適用系統：Linux 　　2、編譯安裝：引用 wget http://blog.s135.com/soft/linux/webbench/webbench-1.5.tar.gz tar zxvf webbench-1.5.tar.gz cd webbench-1.5 make && make install 　　3、使用：引用 webbench -c 10000 -t 60 http://127.0.0.1/test.jpg 　　參數說明：-c表示並發數，-t表示時間(秒) 　　4、測試結果樣本：引用 大家看下每分鐘達到150萬的訪問量我還是本機載入測試的 伺服器配置  CPU:24核  記憶體：32G  硬碟：RAID5 SAS146G 15000轉硬碟陣列 nginx php-fpm最佳化稍後貼出 Webbench - Simple Web Benchmark 1.5 Copyright (c) Radim Kolar 1997-2004, GPL Open Source Software. Benchmarking: GET  10000 clients, running 60 sec. Speed=1377219 pages/min, -30844808 bytes/sec. Requests: 1376697 susceed, 522 failed. [[email protected] conf]# webbench -c 10000 -t 60  Webbench - Simple Web Benchmark 1.5 Copyright (c) Radim Kolar 1997-2004, GPL Open Source Software. Benchmarking: GET  10000 clients, running 60 sec. Speed=1483864 pages/min, -8322775 bytes/sec. Requests: 1483397 susceed, 467 failed.  收藏分享

lqp518 新手上路	2#  發表於 2014-5-25 18:42 | 只看該作者    nginx指令中的最佳化（設定檔） worker_processes 8; 　　nginx進程數，建議按照cpu數目來指定，一般為它的倍數。 worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000 01000000 10000000; 　　為每個進程分配cpu，上例中將8個進程分配到8個cpu，當然可以寫多個，或者將一個進程分配到多個cpu。 worker_rlimit_nofile 102400; 　　這個指令是指當一個nginx進程開啟的最多檔案描述符數目，理論值應該是最多開啟檔案數（ulimit -n）與nginx進程數相除，但是nginx分配請求並不是那麼均勻，所以最好與ulimit -n的值保持一致。 use epoll; 　　使用epoll的I/O模型，這個不用說了吧。 worker_connections 102400; 　　每個進程允許的最多串連數，理論上每台nginx伺服器的最大串連數為worker_processes*worker_connections。 keepalive_timeout 60; 　　keepalive逾時時間。 client_header_buffer_size 4k; 　　用戶端要求標頭部的緩衝區大小，這個可以根據你的系統分頁大小來設定，一般一個請求的頭部大小不會超過1k，不過由於一般系統分頁都要大於1k，所以這裡設定為分頁大小。分頁大小可以用命令getconf PAGESIZE取得。 open_file_cache max=102400 inactive=20s; 　　這個將為開啟檔案指定緩衝，預設是沒有啟用的，max指定緩衝數量，建議和開啟檔案數一致，inactive是指經過多長時間檔案沒被請求後刪除緩衝。 open_file_cache_valid 30s; 　　這個是指多長時間檢查一次緩衝的有效資訊。 open_file_cache_min_uses 1; 　　open_file_cache指令中的inactive參數時間內檔案的最少使用次數，如果超過這個數字，檔案描述符一直是在緩衝中開啟的，如上例，如果有一個檔案在inactive時間內一次沒被使用，它將被移除。 核心參數的最佳化 net.ipv4.tcp_max_tw_buckets = 6000 　　timewait的數量，預設是180000。 net.ipv4.ip_local_port_range = 1024    65000 　　允許系統開啟的連接埠範圍。 net.ipv4.tcp_tw_recycle = 1 　　啟用timewait快速回收。 net.ipv4.tcp_tw_reuse = 1 　　開啟重用。允許將TIME-WAIT sockets重新用於新的TCP串連。 net.ipv4.tcp_syncookies = 1 　　開啟SYN Cookies，當出現SYN等待隊列溢出時，啟用cookies來處理。 net.core.somaxconn = 262144 　　web應用中listen函數的backlog預設會給我們核心參數的net.core.somaxconn限制到128，而nginx定義的NGX_LISTEN_BACKLOG預設為511，所以有必要調整這個值。 net.core.netdev_max_backlog = 262144 　　每個網路介面接收資料包的速率比核心處理這些包的速率快時，允許送到隊列的資料包的最大數目。 net.ipv4.tcp_max_orphans = 262144 　　系統中最多有多少個TCP通訊端不被關聯到任何一個使用者檔案控制代碼上。如果超過這個數字，孤兒串連將即刻被複位並列印出警告資訊。這個限制僅僅是為了防止簡單的DoS攻擊，不能過分依靠它或者人為地減小這個值，更應該增加這個值(如果增加了記憶體之後)。 net.ipv4.tcp_max_syn_backlog = 262144 　　記錄的那些尚未收到用戶端確認資訊的串連請求的最大值。對於有128M記憶體的系統而言，預設值是1024，小記憶體的系統則是128。 net.ipv4.tcp_timestamps = 0 　　時間戳記可以避免序號的卷繞。一個1Gbps的鏈路肯定會遇到以前用過的序號。時間戳記能夠讓核心接受這種"異常"的資料包。這裡需要將其關掉。 net.ipv4.tcp_synack_retries = 1 　　為了開啟對端的串連，核心需要發送一個SYN並附帶一個回應前面一個SYN的ACK。也就是所謂三向交握中的第二次握手。這個設定決定了核心放棄串連之前發送SYN+ACK包的數量。 net.ipv4.tcp_syn_retries = 1 　　在核心放棄建立串連之前發送SYN包的數量。 net.ipv4.tcp_fin_timeout = 1 　　如果通訊端由本端要求關閉，這個參數決定了它保持在FIN-WAIT-2狀態的時間。對端可以出錯並永遠不關閉串連，甚至意外當機。預設值是60秒。2.2 核心的通常值是180秒，你可以按這個設定，但要記住的是，即使你的機器是一個輕載的WEB伺服器，也有因為大量的死通訊端而記憶體溢出的風險，FIN- WAIT-2的危險性比FIN-WAIT-1要小，因為它最多隻能吃掉1.5K記憶體，但是它們的生存期長些。 net.ipv4.tcp_keepalive_time = 30 　　當keepalive起用的時候，TCP發送keepalive訊息的頻度。預設是2小時。 一個完整的核心最佳化配置 net.ipv4.ip_forward = 0 net.ipv4.conf.default.rp_filter = 1 net.ipv4.conf.default.accept_source_route = 0 kernel.sysrq = 0 kernel.core_uses_pid = 1 net.ipv4.tcp_syncookies = 1 kernel.msgmnb = 65536 kernel.msgmax = 65536 kernel.shmmax = 68719476736 kernel.shmall = 4294967296 net.ipv4.tcp_max_tw_buckets = 6000 net.ipv4.tcp_sack = 1 net.ipv4.tcp_window_scaling = 1 net.ipv4.tcp_rmem = 4096        87380   4194304 net.ipv4.tcp_wmem = 4096        16384   4194304 net.core.wmem_default = 8388608 net.core.rmem_default = 8388608 net.core.rmem_max = 16777216 net.core.wmem_max = 16777216 net.core.netdev_max_backlog = 262144 net.core.somaxconn = 262144 net.ipv4.tcp_max_orphans = 3276800 net.ipv4.tcp_max_syn_backlog = 262144 net.ipv4.tcp_timestamps = 0 net.ipv4.tcp_synack_retries = 1 net.ipv4.tcp_syn_retries = 1 net.ipv4.tcp_tw_recycle = 1 net.ipv4.tcp_tw_reuse = 1 net.ipv4.tcp_mem = 94500000 915000000 927000000 net.ipv4.tcp_fin_timeout = 1 net.ipv4.tcp_keepalive_time = 30 net.ipv4.ip_local_port_range = 1024    65000 一個簡單的nginx最佳化設定檔 user  www www; worker_processes 8; worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000 01000000; error_log  /www/log/nginx_error.log  crit; pid        /usr/local/nginx/nginx.pid; worker_rlimit_nofile 204800; events {   use epoll;   worker_connections 204800; } http {   include       mime.types;   default_type  application/octet-stream;   charset  utf-8;   server_names_hash_bucket_size 128;   client_header_buffer_size 2k;   large_client_header_buffers 4 4k;   client_max_body_size 8m;   sendfile on;   tcp_nopush     on;   keepalive_timeout 60;   fastcgi_cache_path /usr/local/nginx/fastcgi_cache levels=1:2                 keys_zone=TEST:10m                 inactive=5m;   fastcgi_connect_timeout 300;   fastcgi_send_timeout 300;   fastcgi_read_timeout 300;   fastcgi_buffer_size 16k;   fastcgi_buffers 16 16k;   fastcgi_busy_buffers_size 16k;   fastcgi_temp_file_write_size 16k;   fastcgi_cache TEST;   fastcgi_cache_valid 200 302 1h;   fastcgi_cache_valid 301 1d;   fastcgi_cache_valid any 1m;   fastcgi_cache_min_uses 1;   fastcgi_cache_use_stale error timeout invalid_header http_500;      open_file_cache max=204800 inactive=20s;   open_file_cache_min_uses 1;   open_file_cache_valid 30s;      tcp_nodelay on;      gzip on;   gzip_min_length  1k;   gzip_buffers     4 16k;   gzip_http_version 1.0;   gzip_comp_level 2;   gzip_types       text/plain application/x-javascript text/css application/xml;   gzip_vary on;   server   {     listen       8080;     server_name  ad.test.com;     index index.php index.htm;     root  /www/html/;     location /status     {         stub_status on;     }     location ~ .*\.(php|php5)?$     {         fastcgi_pass 127.0.0.1:9000;         fastcgi_index index.php;         include fcgi.conf;     }     location ~ .*\.(gif|jpg|jpeg|png|bmp|swf|js|css)$     {       expires      30d;     }     log_format  access  ‘$remote_addr - $remote_user [$time_local] "$request" ‘               ‘$status $body_bytes_sent "$http_referer" ‘               ‘"$http_user_agent" $http_x_forwarded_for‘;     access_log  /www/log/access.log  access;       } } 關於FastCGI的幾個指令 fastcgi_cache_path /usr/local/nginx/fastcgi_cache levels=1:2 keys_zone=TEST:10m inactive=5m; 　　這個指令為FastCGI緩衝指定一個路徑，目錄結構等級，關鍵字地區儲存時間和非活動刪除時間。 fastcgi_connect_timeout 300; 　　指定串連到後端FastCGI的逾時時間。 fastcgi_send_timeout 300; 　　向FastCGI傳送請求的逾時時間，這個值是指已經完成兩次握手後向FastCGI傳送請求的逾時時間。 fastcgi_read_timeout 300; 　　接收FastCGI應答的逾時時間，這個值是指已經完成兩次握手後接收FastCGI應答的逾時時間。 fastcgi_buffer_size 16k; 　　指定讀取FastCGI應答第一部分需要用多大的緩衝區，這裡可以設定為fastcgi_buffers指令指定的緩衝區大小，上面的指令指定它將使用1個16k的緩衝區去讀取應答的第一部分，即應答頭，其實這個應答頭一般情況下都很小（不會超過1k），但是你如果在fastcgi_buffers指令中指定了緩衝區的大小，那麼它也會分配一個fastcgi_buffers指定的緩衝區大小去緩衝。 fastcgi_buffers 16 16k; 　　指定本地需要用多少和多大的緩衝區來緩衝FastCGI的應答，如上所示，如果一個php指令碼所產生的頁面大小為256k，則會為其分配16個16k的緩衝區來緩衝，如果大於256k，增大於256k的部分會緩衝到fastcgi_temp指定的路徑中，當然這對伺服器負載來說是不明智的方案，因為記憶體中處理資料速度要快於硬碟，通常這個值的設定應該選擇一個你的網站中的php指令碼所產生的頁面大小的中間值，比如你的網站大部分指令碼所產生的頁面大小為256k就可以把這個值設定為16 16k，或者4 64k 或者64 4k，但很顯然，後兩種並不是好的設定方法，因為如果產生的頁面只有32k，如果用4 64k它會分配1個64k的緩衝區去緩衝，而如果使用64 4k它會分配8個4k的緩衝區去緩衝，而如果使用16 16k則它會分配2個16k去快取頁面面，這樣看起來似乎更加合理。 fastcgi_busy_buffers_size 32k; 　　這個指令我也不知道是做什麼用，只知道預設值是fastcgi_buffers的兩倍。 fastcgi_temp_file_write_size 32k; 　　在寫入fastcgi_temp_path時將用多大的資料區塊，預設值是fastcgi_buffers的兩倍。 fastcgi_cache TEST 　　開啟FastCGI緩衝並且為其制定一個名稱。個人感覺開啟緩衝非常有用，可以有效降低CPU負載，並且防止502錯誤。但是這個緩衝會引起很多問題，因為它緩衝的是動態網頁面。具體使用還需根據自己的需求。 fastcgi_cache_valid 200 302 1h; fastcgi_cache_valid 301 1d; fastcgi_cache_valid any 1m; 　　為指定的應答代碼指定緩衝時間，如上例中將200，302應答緩衝一小時，301應答緩衝1天，其他為1分鐘。 fastcgi_cache_min_uses 1; 　　緩衝在fastcgi_cache_path指令inactive參數值時間內的最少使用次數，如上例，如果在5分鐘內某檔案1次也沒有被使用，那麼這個檔案將被移除。 fastcgi_cache_use_stale error timeout invalid_header http_500;
	TOP

lqp518 新手上路	3#  發表於 2014-5-25 18:43 | 只看該作者    PHP-FPM是一個PHPFastCGI進程管理器，是只用於PHP的。       PHP-FPM其實是PHP原始碼的一個補丁，旨在將FastCGI進程管理整合進PHP包中。必須將它patch到你的PHP原始碼中，在編譯安裝PHP後才可以使用。       現在我們可以在最新的PHP 5.3.2的源碼樹裡下載得到直接整合了PHP-FPM的分支，據說下個版本會融合進PHP的主分支去。相對Spawn-FCGI，PHP-FPM在CPU和記憶體方面的控制都更勝一籌，而且前者很容易崩潰，必須用crontab進行監控，而PHP-FPM則沒有這種煩惱。       PHP5.3.3已經整合php-fpm了，不再是第三方的包了。PHP-FPM提供了更好的PHP進程管理方式，可以有效控制記憶體和進程、可以平滑重載PHP配置，比spawn-fcgi具有更多優點，所以被PHP官方收錄了。            在./configure的時候帶 –enable-fpm參數即可開啟PHP-FPM。       使用PHP-FPM來控制PHP-CGI的FastCGI進程 /usr/local/php/sbin/php-fpm{start|stop|quit|restart|reload|logrotate} --start 啟動php的fastcgi進程 --stop 強制終止php的fastcgi進程 --quit 平滑終止php的fastcgi進程 --restart 重啟php的fastcgi進程 --reload 重新平滑載入php的php.ini --logrotate 重新啟用log檔案       php-fpm有兩種執行方式, 與Apache一樣，他的進程數也是可以根據設定分為動態和靜態，一種是直接開啟指定數量的php-fpm進程，不再增加或者減少；另一種則是開始的時候開啟一定數量的php-fpm進程，當請求量變大的時候，動態增加php-fpm進程數到上限，當閒置時候自動釋放閒置進程數到一個下限。       這兩種不同的執行方式，可以根據伺服器的實際需求來進行調整。       這裡先說一下涉及到這個的幾個參數吧，他們分別是pm、pm.max_children、pm.start_servers、pm.min_spare_servers和pm.max_spare_servers。 pm表示使用那種方式，有兩個值可以選擇，就是static（靜態）或者dynamic（動態）。在更老一些的版本中，dynamic被稱作apache-like。這個要注意看設定檔給出的說明了。       下面4個參數的意思分別為： pm.max_children：靜態方式下開啟的php-fpm進程數量。 pm.start_servers：動態方式下的起始php-fpm進程數量。 pm.min_spare_servers：動態方式下的最小php-fpm進程數量。 pm.max_spare_servers：動態方式下的最大php-fpm進程數量。       如果dm設定為static，那麼只有pm.max_children這個參數生效。系統會開啟設定的數個php-fpm進程。       如果dm設定為dynamic，那麼pm.max_children參數失效，後面3個參數生效。系統會在php-fpm運行開始的時候啟動 pm.start_servers個php-fpm進程，然後根據系統的需求動態在pm.min_spare_servers和 pm.max_spare_servers之間調整php-fpm進程數。       那麼，對於我們的伺服器，選擇哪種執行方式比較好呢？事實上，跟Apache一樣，我們啟動並執行PHP程式在執行完成後，或多或少會有記憶體泄露的問 題。這也是為什麼開始的時候一個php-fpm進程只佔用3M左右記憶體，運行一段時間後就會上升到20-30M的原因了。所以，動態方式因為會結束掉多餘 的進程，可以回收釋放一些記憶體，所以推薦在記憶體較少的伺服器或者VPS上使用。具體最大數量根據 記憶體/20M 得到。比如說512M的VPS，建議pm.max_spare_servers設定為20。至於pm.min_spare_servers，則建議根據服 務器的負載情況來設定，比較合適的值在5~10之間。       然後對於比較大記憶體的伺服器來說，設定為靜態話會提高效率。因為頻繁開關php-fpm進程也會有時滯，所以記憶體夠大的情況下開靜態效果會更好。數量也可以根據 記憶體/30M 得到。比如說2GB記憶體的伺服器，可以設定為50；4GB記憶體可以設定為100等。       DEMO參數如下： pm=dynamic pm.max_children=20 pm.start_servers=5 pm.min_spare_servers=5 pm.max_spare_servers=20       這樣就可以最大的節省記憶體並提高執行效率。
	TOP

lqp518 新手上路

4#  發表於 2014-5-25 18:46 | 只看該作者    我本機設定檔如下 伺服器配置  CPU:24核  記憶體：32G  硬碟：RAID5 SAS146G 15000轉硬碟陣列 提示硬體設定沒這麼高不要設這麼多！ # nginx conf conf/nginx.conf # Created by http://www.wdlinux.cn # Last Updated 2010.06.01 user  www www; worker_processes  48; error_log  logs/error.log  notice; pid        logs/nginx.pid; worker_rlimit_nofile 409600; events {     use epoll;     worker_connections  409600; } http {     include       mime.types;     default_type  application/octet-stream;     server_names_hash_bucket_size 128;     client_header_buffer_size 32k;     large_client_header_buffers 4 32k;     client_max_body_size 8m;     limit_conn_zone $binary_remote_addr zone=one:32k; ###########xinjiade###########################    fastcgi_cache_path /www/wdlinux/nginx/fastcgi_cache levels=1:2                 keys_zone=TEST:10m                 inactive=5m;   fastcgi_connect_timeout 300;   fastcgi_send_timeout 300;   fastcgi_read_timeout 300;   fastcgi_buffer_size 16k;   fastcgi_buffers 16 16k;   fastcgi_busy_buffers_size 16k;   fastcgi_temp_file_write_size 16k;   fastcgi_cache TEST;   fastcgi_cache_valid 200 302 1h;   fastcgi_cache_valid 301 1d;   fastcgi_cache_valid any 1m;   fastcgi_cache_min_uses 1;   fastcgi_cache_use_stale error timeout invalid_header http_500;     open_file_cache max=102400 inactive=20s;     open_file_cache_valid 30s;     open_file_cache_min_uses 1; ##############################################     sendfile        on;     tcp_nopush     on;     keepalive_timeout  60;     tcp_nodelay on;     gzip  on;     gzip_min_length  1k;     gzip_buffers     4 16k;     gzip_http_version 1.0;     gzip_comp_level 2;     gzip_types       text/plain application/x-javascript text/css application/xml;     gzip_vary on;     log_format  wwwlogs  ‘$remote_addr - $remote_user [$time_local] $request $status $body_bytes_sent $http_referer $http_user_agent $http_x_forwarded_for‘;     #include default.conf;     include vhost/*.conf; } php-fmp 設定 pm.max_children=512 pm.start_servers=128 pm.min_spare_servers=30 pm.max_spare_servers=128

壓力測試 php-fpm 最佳化