zoukankan      html  css  js  c++  java
  • 【转】Nginx服务并发过10万的Linux内核优化配置

    http://www.linuxidc.com/Linux/2012-11/75151.htm
    以下Linux 系统内核优化配置均经在线业务系统测试,服务器运行状态良好,用了一些时间整理,现和大家分享一下,如有那位高人看到配置上有问题,请给与指出!
    # Controls the use of TCP syncookies
    #表示开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接,默认为0,表示关闭;
    net.ipv4.tcp_syncookies = 1
    #一个布尔类型的标志,控制着当有很多的连接请求时内核的行为。启用的话,如果服务超载,内核将主动地发送RST包。
    net.ipv4.tcp_abort_on_overflow = 1
    #表示系统同时保持TIME_WAIT的最大数量,如果超过这个数字,TIME_WAIT将立刻被清除并打印警告信息。
    #默认为180000,改为6000。对于Apache、Nginx等服务器,此项参数可以控制TIME_WAIT的最大数量,服务器被大量的TIME_WAIT拖死
    net.ipv4.tcp_max_tw_buckets = 6000
    #有选择的应答
    net.ipv4.tcp_sack = 1
    #该文件表示设置tcp/ip会话的滑动窗口大小是否可变。参数值为布尔值,为1时表示可变,为0时表示不可变。tcp/ip通常使用的窗口最大可达到65535 字节,对于高速网络.
    #该值可能太小,这时候如果启用了该功能,可以使tcp/ip滑动窗口大小增大数个数量级,从而提高数据传输的能力。
    net.ipv4.tcp_window_scaling = 1
    #TCP接收缓冲区
    net.ipv4.tcp_rmem = 4096 87380 4194304
    #TCP发送缓冲区
    net.ipv4.tcp_wmem = 4096 66384 4194304
    # # Out of socket memory
    net.ipv4.tcp_mem = 94500000 915000000 927000000
    #该文件表示每个套接字所允许的最大缓冲区的大小。
    net.core.optmem_max = 81920
    #该文件指定了发送套接字缓冲区大小的缺省值(以字节为单位)。
    net.core.wmem_default = 8388608
    #指定了发送套接字缓冲区大小的最大值(以字节为单位)。
    net.core.wmem_max = 16777216
    #指定了接收套接字缓冲区大小的缺省值(以字节为单位)。
    net.core.rmem_default = 8388608
    #指定了接收套接字缓冲区大小的最大值(以字节为单位)。
    net.core.rmem_max = 16777216
    #表示SYN队列的长度,默认为1024,加大队列长度为10200000,可以容纳更多等待连接的网络连接数。
    net.ipv4.tcp_max_syn_backlog = 1020000
    #每个网络接口接收数据包的速率比内核处理这些包的速率快时,允许送到队列的数据包的最大数目。
    net.core.netdev_max_backlog = 862144
    #web 应用中listen 函数的backlog 默认会给我们内核参数的net.core.somaxconn 限制到128,而nginx 定义的NGX_LISTEN_BACKLOG 默认为511,所以有必要调整这个值。
    net.core.somaxconn = 262144
    #系统中最多有多少个TCP 套接字不被关联到任何一个用户文件句柄上。如果超过这个数字,孤儿连接将即刻被复位并打印出警告信息。
    #这个限制仅仅是为了防止简单的DoS 攻击,不能过分依靠它或者人为地减小这个值,更应该增加这个
    net.ipv4.tcp_max_orphans = 327680
    #时间戳可以避免序列号的卷绕。一个1Gbps 的链路肯定会遇到以前用过的序列号。时间戳能够让内核接受这种“异常”的数据包。这里需要将其关掉。
    net.ipv4.tcp_timestamps = 0
    #为了打开对端的连接,内核需要发送一个SYN 并附带一个回应前面一个SYN 的ACK。也就是所谓三次握手中的第二次握手。这个设置决定了内核放弃连接之前发送SYN+ACK 包的数量。
    net.ipv4.tcp_synack_retries = 1
    #在内核放弃建立连接之前发送SYN 包的数量。
    net.ipv4.tcp_syn_retries = 1
    #表示开启TCP连接中TIME-WAIT sockets的快速回收,默认为0,表示关闭;
    net.ipv4.tcp_tw_recycle = 1
    #表示开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接,默认为0,表示关闭;
    net.ipv4.tcp_tw_reuse = 1
    #修改系統默认的 TIMEOUT 时间。
    net.ipv4.tcp_fin_timeout = 15
    #表示当keepalive起用的时候,TCP发送keepalive消息的频度。缺省是2小时,建议改为20分钟。
    net.ipv4.tcp_keepalive_time = 30
    #表示用于向外连接的端口范围。缺省情况下很小:32768到61000,改为10000到65000。(注意:这里不要将最低值设的太低,否则可能会占用掉正常的端口!)
    net.ipv4.ip_local_port_range = 1024 65000
    #以下可能需要加载ip_conntrack模块 modprobe ip_conntrack ,有文档说防火墙开启情况下此模块失效
    #縮短established的超時時間
    net.netfilter.nf_conntrack_tcp_timeout_established = 180
    #CONNTRACK_MAX 允许的最大跟踪连接条目,是在内核内存中netfilter可以同时处理的“任务”(连接跟踪条目)
    net.netfilter.nf_conntrack_max = 1048576
    net.nf_conntrack_max = 1048576

    nginx 优化 实现10万并发

    一般来说nginx配置文件中对优化比较有作用的为以下几项:
    worker_processes 8;
    1 nginx进程数,建议按照cpu数目来指定,一般为它的倍数。
    worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000
    01000000 10000000;
    为每个进程分配 cpu,上例中将 8 个进程分配到 8 个 cpu,当然可以写多个,或者将一
    个进程分配到多个cpu。
    worker_rlimit_nofile 102400;
    这个指令是指当一个nginx进程打开的最多文件描述符数目,理论值应该是最多打开文
    件数(ulimit -n)与nginx进程数相除,但是nginx分配请求并不是那么均匀,所以最好与ulimit
    -n的值保持一致。
    use epoll;
    使用epoll的I/O模型,这个不用说了吧。
    worker_connections 102400;
    每个进程允许的最多连接数,理论上每台 nginx 服务器的最大连接数为
    worker_processes*worker_connections。
    keepalive_timeout 60;
    keepalive超时时间。
    client_header_buffer_size 4k;
    客户端请求头部的缓冲区大小,这个可以根据你的系统分页大小来设置,一般一个请求
    头的大小不会超过 1k,不过由于一般系统分页都要大于 1k,所以这里设置为分页大小。分
    页大小可以用命令getconf PAGESIZE取得。
    open_file_cache max=102400 inactive=20s;
    这个将为打开文件指定缓存,默认是没有启用的,max指定缓存数量,建议和打开文件
    数一致,inactive 是指经过多长时间文件没被请求后删除缓存。
    open_file_cache_valid 30s;
    这个是指多长时间检查一次缓存的有效信息。
    open_file_cache_min_uses 1;
    open_file_cache指令中的inactive 参数时间内文件的最少使用次数,如果超过这个数字,文
    件描述符一直是在缓存中打开的,如上例,如果有一个文件在inactive 时间内一次没被使用,
    它将被移除。
    2 关于内核参数的优化:
    net.ipv4.tcp_max_tw_buckets = 6000
    timewait的数量,默认是180000。
    net.ipv4.ip_local_port_range = 1024 65000
    允许系统打开的端口范围。
    net.ipv4.tcp_tw_recycle = 1
    启用timewait快速回收。
    net.ipv4.tcp_tw_reuse = 1
    开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接。
    net.ipv4.tcp_syncookies = 1
    开启SYN Cookies,当出现SYN 等待队列溢出时,启用cookies来处理。
    net.core.somaxconn = 262144
    web 应用中 listen 函数的 backlog 默认会给我们内核参数的 net.core.somaxconn 限制到
    128,而nginx定义的NGX_LISTEN_BACKLOG 默认为511,所以有必要调整这个值。
    net.core.netdev_max_backlog = 262144
    每个网络接口接收数据包的速率比内核处理这些包的速率快时,允许送到队列的数据包
    的最大数目。
    net.ipv4.tcp_max_orphans = 262144
    系统中最多有多少个TCP套接字不被关联到任何一个用户文件句柄上。如果超过这个数
    字,孤儿连接将即刻被复位并打印出警告信息。这个限制仅仅是为了防止简单的DoS攻击,
    不能过分依靠它或者人为地减小这个值,更应该增加这个值(如果增加了内存之后)。
    net.ipv4.tcp_max_syn_backlog = 262144
    记录的那些尚未收到客户端确认信息的连接请求的最大值。对于有128M内存的系统而
    言,缺省值是1024,小内存的系统则是128。
    net.ipv4.tcp_timestamps = 0
    时间戳可以避免序列号的卷绕。一个1Gbps的链路肯定会遇到以前用过的序列号。时间
    戳能够让内核接受这种“异常”的数据包。这里需要将其关掉。
    net.ipv4.tcp_synack_retries = 1
    为了打开对端的连接,内核需要发送一个SYN并附带一个回应前面一个SYN的ACK。也
    就是所谓三次握手中的第二次握手。这个设置决定了内核放弃连接之前发送 SYN+ACK 包的
    数量。
    net.ipv4.tcp_syn_retries = 1
    在内核放弃建立连接之前发送SYN 包的数量。
    net.ipv4.tcp_fin_timeout = 1
    如果套接字由本端要求关闭,这个参数决定了它保持在 FIN-WAIT-2 状态的时间。对端
    可以出错并永远不关闭连接,甚至意外当机。缺省值是60 秒。2.2 内核的通常值是180 秒,
    3 你可以按这个设置,但要记住的是,即使你的机器是一个轻载的 WEB 服务器,也有因为大
    量的死套接字而内存溢出的风险,FIN- WAIT-2 的危险性比FIN-WAIT-1 要小,因为它最多只
    能吃掉1.5K内存,但是它们的生存期长些。
    net.ipv4.tcp_keepalive_time = 30
    当keepalive起用的时候,TCP发送keepalive消息的频度。缺省是2 小时。
    下面贴一个完整的内核优化设置:

    net.ipv4.ip_forward = 0
    net.ipv4.conf.default.rp_filter = 1
    net.ipv4.conf.default.accept_source_route = 0
    kernel.sysrq = 0
    kernel.core_uses_pid = 1
    net.ipv4.tcp_syncookies = 1
    kernel.msgmnb = 65536
    kernel.msgmax = 65536
    kernel.shmmax = 68719476736
    kernel.shmall = 4294967296
    net.ipv4.tcp_max_tw_buckets = 6000
    net.ipv4.tcp_sack = 1
    net.ipv4.tcp_window_scaling = 1
    net.ipv4.tcp_rmem = 4096        87380    4194304
    net.ipv4.tcp_wmem = 4096        16384    4194304
    net.core.wmem_default = 8388608
    net.core.rmem_default = 8388608
    net.core.rmem_max = 16777216
    net.core.wmem_max = 16777216
    net.core.netdev_max_backlog = 262144
    net.core.somaxconn = 262144
    net.ipv4.tcp_max_orphans = 3276800
    net.ipv4.tcp_max_syn_backlog = 262144
    net.ipv4.tcp_timestamps = 0
    net.ipv4.tcp_synack_retries = 1
    net.ipv4.tcp_syn_retries = 1
    net.ipv4.tcp_tw_recycle = 1
    net.ipv4.tcp_tw_reuse = 1
    net.ipv4.tcp_mem = 94500000 915000000 927000000
    net.ipv4.tcp_fin_timeout = 1
    net.ipv4.tcp_keepalive_time = 30
    net.ipv4.ip_local_port_range = 1024    65000

    下面是一个简单的nginx配置文件:

    user  www www;
    worker_processes 8;
    worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000
    01000000;
    error_log  /www/log/nginx_error.log  crit;
    pid        /usr/local/nginx/nginx.pidTrebuchet M
  • 相关阅读:
    MVC路由测试
    关于Dapper的使用笔记3
    关于Dapper的使用笔记2
    关于Dapper的使用笔记1
    关于WCF与Autofac的整合
    js获取页面元素距离浏览器工作区顶端的距离
    document.body.scrollTop和document.documentElement.scrollTop 以及值为0的问题
    js实现获取对象key名
    微信小程序分包跳转主包页面
    js禁止页面滚动
  • 原文地址:https://www.cnblogs.com/arvintang/p/6008717.html
Copyright © 2011-2022 走看看