Nginx 下 Too many open files in system 的解决

Nginx 出現 500 Error, 錯誤訊息只能從 Log 查到, 有遇到下述兩種狀況:

socket() failed (24: Too many open files) while connecting to upstream
512 worker_connections are not enough while connecting to upstream

在此紀錄解決方法.

Nginx “Too many open files" 修復

錯誤訊息

2011/05/01 23:00:49 [alert] 7387#0: *6259768 socket() failed (24: Too many open files) while connecting to upstream, client: 123.123.123.123, server: www.example.com, request: “GET [[/]] HTTP/1.1″, upstream: “fastcgi://127.0.0.1:1234″, host: “www.example.com"

解法

$ sudo su – www-data
$ ulimit -n # 看目前系統設定的限制 (ulimit -a # 可查看全部參數)

1024
vim /etc/security/limits.conf # 由此檔案設定 nofile (nofile – max number of open files) 的大小

# 增加/修改下述兩行
* soft nofile 655360
* hard nofile 655360
ulimit -n # 登出後, 在登入, 執行就會出現此值

655360

4. 若 ulimit -n 沒出現 655360 的話, 可使用 ulimit -n 655360 # 強制設定

5. 再用 ulimit -n 或 ulimit -Sn (驗證軟式設定)、ulimit -Hn (驗證硬式設定) 檢查看看(或 ulimit -a).

從系統面另外計算 + 設定

lsof | wc -l # 計算開啟檔案數量
sudo vim /etc/sysctl.conf
fs.file-max = 3268890
sudo sysctl -p

另外：

使用通配符*表示所有用户,*号可以换成具体的用户名或者用户组的名称。
    这个文件里的限制对root以外的用户在新登陆是立即生效，不用reboot。
    soft 指的是当前系统生效的设置值。hard 表明系统中所能设定的最大值。soft 的限制不能比har 限制高。用 – 就表明同时设置了 soft 和 hard 的值。
    nofile – 打开文件的最大数目, noproc – 进程的最大数目

修改文件：/etc/sysctl.conf。在文件中添加：
fs.file-max=655350 #限制整个系统最大文件句柄数
运行命令：/sbin/sysctl -p 使配置生效

Nginx “512 worker_connections are not enough" 修復

錯誤訊息

2011/05/01 23:21:21 [alert] 19973#0: *6325881 512 worker_connections are not enough while connecting to upstream, client: 123.123.123.123, server: www.example.com, request: “GET / HTTP/1.1″, upstream: “fastcgi://127.0.0.1:1234″, host: “www.example.com"

解法

/etc/nginx/nginx.conf

worker_connections 10240;
參考 Nginx CoreModule

worker_processes 2;
worker_rlimit_nofile 10240;
events {
# worker_connections 10240;
}

Nginx 的 connection 增加後, 整體速度會變慢很多, 主要原因是 php-cgi 不夠用, 所以要作以下調整.

php-cgi was started with phpfcgid_children="10″ and phpfcgid_requests="500″
ab was run on another server, connect via a switch using GBit ethernet

參考此篇設定: PHP performance III — Running nginx

vim /etc/nginx/nginx.conf

worker_connections 10240;
worker_rlimit_nofile
vim /etc/init.d/php-fcgi

PHP_FCGI_CHILDREN=15
PHP_FCGI_MAX_REQUESTS=1000
改成
PHP_FCGI_CHILDREN=512 # 或 150 慢慢加, 注意 MySQL connection 是否夠用
PHP_FCGI_MAX_REQUESTS=10240
上述文章的 phpfcgid_stop(), 寫得還不錯, 有需要可以用看看.

phpfcgid_stop() { echo "Stopping $name." pids=`pgrep php-cgi` pkill php-cgi wait_for_pids $pids }