• 【转】Nginx服务并发过10万的Linux内核优化配置


    http://www.linuxidc.com/Linux/2012-11/75151.htm
    以下Linux 系统内核优化配置均经在线业务系统测试,服务器运行状态良好,用了一些时间整理,现和大家分享一下,如有那位高人看到配置上有问题,请给与指出!
    # Controls the use of TCP syncookies
    #表示开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接,默认为0,表示关闭;
    net.ipv4.tcp_syncookies = 1
    #一个布尔类型的标志,控制着当有很多的连接请求时内核的行为。启用的话,如果服务超载,内核将主动地发送RST包。
    net.ipv4.tcp_abort_on_overflow = 1
    #表示系统同时保持TIME_WAIT的最大数量,如果超过这个数字,TIME_WAIT将立刻被清除并打印警告信息。
    #默认为180000,改为6000。对于Apache、Nginx等服务器,此项参数可以控制TIME_WAIT的最大数量,服务器被大量的TIME_WAIT拖死
    net.ipv4.tcp_max_tw_buckets = 6000
    #有选择的应答
    net.ipv4.tcp_sack = 1
    #该文件表示设置tcp/ip会话的滑动窗口大小是否可变。参数值为布尔值,为1时表示可变,为0时表示不可变。tcp/ip通常使用的窗口最大可达到65535 字节,对于高速网络.
    #该值可能太小,这时候如果启用了该功能,可以使tcp/ip滑动窗口大小增大数个数量级,从而提高数据传输的能力。
    net.ipv4.tcp_window_scaling = 1
    #TCP接收缓冲区
    net.ipv4.tcp_rmem = 4096 87380 4194304
    #TCP发送缓冲区
    net.ipv4.tcp_wmem = 4096 66384 4194304
    # # Out of socket memory
    net.ipv4.tcp_mem = 94500000 915000000 927000000
    #该文件表示每个套接字所允许的最大缓冲区的大小。
    net.core.optmem_max = 81920
    #该文件指定了发送套接字缓冲区大小的缺省值(以字节为单位)。
    net.core.wmem_default = 8388608
    #指定了发送套接字缓冲区大小的最大值(以字节为单位)。
    net.core.wmem_max = 16777216
    #指定了接收套接字缓冲区大小的缺省值(以字节为单位)。
    net.core.rmem_default = 8388608
    #指定了接收套接字缓冲区大小的最大值(以字节为单位)。
    net.core.rmem_max = 16777216
    #表示SYN队列的长度,默认为1024,加大队列长度为10200000,可以容纳更多等待连接的网络连接数。
    net.ipv4.tcp_max_syn_backlog = 1020000
    #每个网络接口接收数据包的速率比内核处理这些包的速率快时,允许送到队列的数据包的最大数目。
    net.core.netdev_max_backlog = 862144
    #web 应用中listen 函数的backlog 默认会给我们内核参数的net.core.somaxconn 限制到128,而nginx 定义的NGX_LISTEN_BACKLOG 默认为511,所以有必要调整这个值。
    net.core.somaxconn = 262144
    #系统中最多有多少个TCP 套接字不被关联到任何一个用户文件句柄上。如果超过这个数字,孤儿连接将即刻被复位并打印出警告信息。
    #这个限制仅仅是为了防止简单的DoS 攻击,不能过分依靠它或者人为地减小这个值,更应该增加这个
    net.ipv4.tcp_max_orphans = 327680
    #时间戳可以避免序列号的卷绕。一个1Gbps 的链路肯定会遇到以前用过的序列号。时间戳能够让内核接受这种“异常”的数据包。这里需要将其关掉。
    net.ipv4.tcp_timestamps = 0
    #为了打开对端的连接,内核需要发送一个SYN 并附带一个回应前面一个SYN 的ACK。也就是所谓三次握手中的第二次握手。这个设置决定了内核放弃连接之前发送SYN+ACK 包的数量。
    net.ipv4.tcp_synack_retries = 1
    #在内核放弃建立连接之前发送SYN 包的数量。
    net.ipv4.tcp_syn_retries = 1
    #表示开启TCP连接中TIME-WAIT sockets的快速回收,默认为0,表示关闭;
    net.ipv4.tcp_tw_recycle = 1
    #表示开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接,默认为0,表示关闭;
    net.ipv4.tcp_tw_reuse = 1
    #修改系統默认的 TIMEOUT 时间。
    net.ipv4.tcp_fin_timeout = 15
    #表示当keepalive起用的时候,TCP发送keepalive消息的频度。缺省是2小时,建议改为20分钟。
    net.ipv4.tcp_keepalive_time = 30
    #表示用于向外连接的端口范围。缺省情况下很小:32768到61000,改为10000到65000。(注意:这里不要将最低值设的太低,否则可能会占用掉正常的端口!)
    net.ipv4.ip_local_port_range = 1024 65000
    #以下可能需要加载ip_conntrack模块 modprobe ip_conntrack ,有文档说防火墙开启情况下此模块失效
    #縮短established的超時時間
    net.netfilter.nf_conntrack_tcp_timeout_established = 180
    #CONNTRACK_MAX 允许的最大跟踪连接条目,是在内核内存中netfilter可以同时处理的“任务”(连接跟踪条目)
    net.netfilter.nf_conntrack_max = 1048576
    net.nf_conntrack_max = 1048576

    nginx 优化 实现10万并发

    一般来说nginx配置文件中对优化比较有作用的为以下几项:
    worker_processes 8;
    1 nginx进程数,建议按照cpu数目来指定,一般为它的倍数。
    worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000
    01000000 10000000;
    为每个进程分配 cpu,上例中将 8 个进程分配到 8 个 cpu,当然可以写多个,或者将一
    个进程分配到多个cpu。
    worker_rlimit_nofile 102400;
    这个指令是指当一个nginx进程打开的最多文件描述符数目,理论值应该是最多打开文
    件数(ulimit -n)与nginx进程数相除,但是nginx分配请求并不是那么均匀,所以最好与ulimit
    -n的值保持一致。
    use epoll;
    使用epoll的I/O模型,这个不用说了吧。
    worker_connections 102400;
    每个进程允许的最多连接数,理论上每台 nginx 服务器的最大连接数为
    worker_processes*worker_connections。
    keepalive_timeout 60;
    keepalive超时时间。
    client_header_buffer_size 4k;
    客户端请求头部的缓冲区大小,这个可以根据你的系统分页大小来设置,一般一个请求
    头的大小不会超过 1k,不过由于一般系统分页都要大于 1k,所以这里设置为分页大小。分
    页大小可以用命令getconf PAGESIZE取得。
    open_file_cache max=102400 inactive=20s;
    这个将为打开文件指定缓存,默认是没有启用的,max指定缓存数量,建议和打开文件
    数一致,inactive 是指经过多长时间文件没被请求后删除缓存。
    open_file_cache_valid 30s;
    这个是指多长时间检查一次缓存的有效信息。
    open_file_cache_min_uses 1;
    open_file_cache指令中的inactive 参数时间内文件的最少使用次数,如果超过这个数字,文
    件描述符一直是在缓存中打开的,如上例,如果有一个文件在inactive 时间内一次没被使用,
    它将被移除。
    2 关于内核参数的优化:
    net.ipv4.tcp_max_tw_buckets = 6000
    timewait的数量,默认是180000。
    net.ipv4.ip_local_port_range = 1024 65000
    允许系统打开的端口范围。
    net.ipv4.tcp_tw_recycle = 1
    启用timewait快速回收。
    net.ipv4.tcp_tw_reuse = 1
    开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接。
    net.ipv4.tcp_syncookies = 1
    开启SYN Cookies,当出现SYN 等待队列溢出时,启用cookies来处理。
    net.core.somaxconn = 262144
    web 应用中 listen 函数的 backlog 默认会给我们内核参数的 net.core.somaxconn 限制到
    128,而nginx定义的NGX_LISTEN_BACKLOG 默认为511,所以有必要调整这个值。
    net.core.netdev_max_backlog = 262144
    每个网络接口接收数据包的速率比内核处理这些包的速率快时,允许送到队列的数据包
    的最大数目。
    net.ipv4.tcp_max_orphans = 262144
    系统中最多有多少个TCP套接字不被关联到任何一个用户文件句柄上。如果超过这个数
    字,孤儿连接将即刻被复位并打印出警告信息。这个限制仅仅是为了防止简单的DoS攻击,
    不能过分依靠它或者人为地减小这个值,更应该增加这个值(如果增加了内存之后)。
    net.ipv4.tcp_max_syn_backlog = 262144
    记录的那些尚未收到客户端确认信息的连接请求的最大值。对于有128M内存的系统而
    言,缺省值是1024,小内存的系统则是128。
    net.ipv4.tcp_timestamps = 0
    时间戳可以避免序列号的卷绕。一个1Gbps的链路肯定会遇到以前用过的序列号。时间
    戳能够让内核接受这种“异常”的数据包。这里需要将其关掉。
    net.ipv4.tcp_synack_retries = 1
    为了打开对端的连接,内核需要发送一个SYN并附带一个回应前面一个SYN的ACK。也
    就是所谓三次握手中的第二次握手。这个设置决定了内核放弃连接之前发送 SYN+ACK 包的
    数量。
    net.ipv4.tcp_syn_retries = 1
    在内核放弃建立连接之前发送SYN 包的数量。
    net.ipv4.tcp_fin_timeout = 1
    如果套接字由本端要求关闭,这个参数决定了它保持在 FIN-WAIT-2 状态的时间。对端
    可以出错并永远不关闭连接,甚至意外当机。缺省值是60 秒。2.2 内核的通常值是180 秒,
    3 你可以按这个设置,但要记住的是,即使你的机器是一个轻载的 WEB 服务器,也有因为大
    量的死套接字而内存溢出的风险,FIN- WAIT-2 的危险性比FIN-WAIT-1 要小,因为它最多只
    能吃掉1.5K内存,但是它们的生存期长些。
    net.ipv4.tcp_keepalive_time = 30
    当keepalive起用的时候,TCP发送keepalive消息的频度。缺省是2 小时。
    下面贴一个完整的内核优化设置:

    net.ipv4.ip_forward = 0
    net.ipv4.conf.default.rp_filter = 1
    net.ipv4.conf.default.accept_source_route = 0
    kernel.sysrq = 0
    kernel.core_uses_pid = 1
    net.ipv4.tcp_syncookies = 1
    kernel.msgmnb = 65536
    kernel.msgmax = 65536
    kernel.shmmax = 68719476736
    kernel.shmall = 4294967296
    net.ipv4.tcp_max_tw_buckets = 6000
    net.ipv4.tcp_sack = 1
    net.ipv4.tcp_window_scaling = 1
    net.ipv4.tcp_rmem = 4096        87380    4194304
    net.ipv4.tcp_wmem = 4096        16384    4194304
    net.core.wmem_default = 8388608
    net.core.rmem_default = 8388608
    net.core.rmem_max = 16777216
    net.core.wmem_max = 16777216
    net.core.netdev_max_backlog = 262144
    net.core.somaxconn = 262144
    net.ipv4.tcp_max_orphans = 3276800
    net.ipv4.tcp_max_syn_backlog = 262144
    net.ipv4.tcp_timestamps = 0
    net.ipv4.tcp_synack_retries = 1
    net.ipv4.tcp_syn_retries = 1
    net.ipv4.tcp_tw_recycle = 1
    net.ipv4.tcp_tw_reuse = 1
    net.ipv4.tcp_mem = 94500000 915000000 927000000
    net.ipv4.tcp_fin_timeout = 1
    net.ipv4.tcp_keepalive_time = 30
    net.ipv4.ip_local_port_range = 1024    65000

    下面是一个简单的nginx配置文件:

    user  www www;
    worker_processes 8;
    worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000
    01000000;
    error_log  /www/log/nginx_error.log  crit;
    pid        /usr/local/nginx/nginx.pidTrebuchet M
  • 相关阅读:
    Educational Codeforces Round 20 D. Magazine Ad
    Educational Codeforces Round 20 C. Maximal GCD
    紫书第三章训练2 暴力集
    Educational Codeforces Round 20 B. Distances to Zero
    Educational Codeforces Round 20 A. Maximal Binary Matrix
    紫书第三章训练1 D
    紫书第一章训练1 D -Message Decoding
    HAZU校赛 Problem K: Deadline
    Mutual Training for Wannafly Union #8 D
    紫书第三章训练1 E
  • 原文地址:https://www.cnblogs.com/arvintang/p/6008717.html
Copyright © 2020-2023  润新知