因为默认Linux内核参数考虑的是最通用的场景,而这一单明显不符合用于支持高并发访问的Web服务器的定义,所以需要修改Linux内核参数。
在优化内核时,可以做的事情很多,不过我们通常会根据业务特点来进行调整,当服务器作为静态WEB内容服务器、反向代理服务器或是提供图片略缩图(实施压缩图片)的服务器时,其内核参数的调整都是不同的,本帖只针对Nginx支持更多并发请求的TCP网络参数做简单说明。
运行如下命令开始修改内核参数:
sudo vi /etc/sysctl.conf
常用配置:
-
fs.file-max = 999999
-
net.ipv4.tcp_tw_reuse = 1
-
net.ipv4.tcp_keepalive_time = 600
-
net.ipv4.tcp_fin_timeout = 30
-
net.ipv4.tcp_max_tw_buckets = 5000
-
net.ipv4.ip_local_port_range = 1024 61000
-
net.ipv4.tcp_rmem = 4096 32768 262142
-
net.ipv4.tcp_wmem = 4096 32768 262142
-
net.core.netdev_max_backlog = 8096
-
net.core.rmem_default = 262144
-
net.core.wmem_default = 262144
-
net.core.rmem_max = 2097152
-
net.core.wmem_max = 2097152
-
net.ipv4.tcp_syncookies = 1
-
net.ipv4.tcp_max_syn.backlog=1024
然后执行命令,是上述修改生效:
sysctl-p
配置参数释义(内容来自于陶辉 著“深入理解Nginx模块开发与架构解析第2版.pdf”一书):
-
·file-max:这个参数表示进程(比如一个worker进程)可以同时打开的最大句柄数,这 个参数直接限制最大并发连接数,需根据实际情况配置。
-
·tcp_tw_reuse:这个参数设置为1,表示允许将TIME-WAIT状态的socket重新用于新的 TCP连接,这对于服务器来说很有意义,因为服务器上总会有大量TIME-WAIT状态的连接。
-
·tcp_keepalive_time:这个参数表示当keepalive启用时,TCP发送keepalive消息的频度。 默认是2小时,若将其设置得小一些,可以更快地清理无效的连接。
-
·tcp_fin_timeout:这个参数表示当服务器主动关闭连接时,socket保持在FIN-WAIT-2状 态的最大时间。
-
·tcp_max_tw_buckets:这个参数表示操作系统允许TIME_WAIT套接字数量的最大值, 如果超过这个数字,TIME_WAIT套接字将立刻被清除并打印警告信息。该参数默认为 180000,过多的TIME_WAIT套接字会使Web服务器变慢。
-
·tcp_max_syn_backlog:这个参数表示TCP三次握手建立阶段接收SYN请求队列的最大 长度,默认为1024,将其设置得大一些可以使出现Nginx繁忙来不及accept新连接的情况时, Linux不至于丢失客户端发起的连接请求。
-
·ip_local_port_range:这个参数定义了在UDP和TCP连接中本地(不包括连接的远端) 端口的取值范围。
-
·net.ipv4.tcp_rmem:这个参数定义了TCP接收缓存(用于TCP接收滑动窗口)的最小 值、默认值、最大值。
-
·net.ipv4.tcp_wmem:这个参数定义了TCP发送缓存(用于TCP发送滑动窗口)的最小 值、默认值、最大值。
-
·netdev_max_backlog:当网卡接收数据包的速度大于内核处理的速度时,会有一个队列 保存这些数据包。这个参数表示该队列的最大值。
-
·rmem_default:这个参数表示内核套接字接收缓存区默认的大小。
-
·wmem_default:这个参数表示内核套接字发送缓存区默认的大小。
-
·rmem_max:这个参数表示内核套接字接收缓存区的最大大小。
-
·wmem_max:这个参数表示内核套接字发送缓存区的最大大小。
-
注意 滑动窗口的大小与套接字缓存区会在一定程度上影响并发连接的数目。每个 TCP连接都会为维护TCP滑动窗口而消耗内存,这个窗口会根据服务器的处理速度收缩或扩 张。
-
参数wmem_max的设置,需要平衡物理内存的总大小、Nginx并发处理的最大连接数量 (由nginx.conf中的worker_processes和worker_connections参数决定)而确定。当然,如果仅仅 为了提高并发量使服务器不出现Out Of Memory问题而去降低滑动窗口大小,那么并不合 适,因为滑动窗口过小会影响大数据量的传输速度。rmem_default、wmem_default、 rmem_max、wmem_max这4个参数的设置需要根据我们的业务特性以及实际的硬件成本来综 合考虑。
-
·tcp_syncookies:该参数与性能无关,用于解决TCP的SYN攻击。