zoukankan      html  css  js  c++  java
  • 使用docker构建分布式接口服务

    使用docker构建分布式接口服务

    docker的安装

    ·# 更新软件包,线上环境慎用
    yum update
    # 安装docker
    yum install -y docker
    # 启动docker 服务
    systemctl start docker
    # 查看docker版本
    docker version
    # 查看运行的docker服务
    docker ps 
    # 查看所有的docker服务
    docker ps -a
    # 查看本地的镜像,通过镜像才能启动服务
    docker images
    # 拉取docker镜像,比如 tomcat
    docker pull tomcat
    # 设置国内的注册中心,可以加快镜像下载速度
    vi /et/docker/daemon.json
    # 输入以下内容
    {
      "registry-mirrors": ["http://hub-mirror.c.163.com"]
    }
    #然后重启docker服务,先停止,然后再启动。
    systemctl stop docker
    systemctl start docker
    # 启动给一个服务,比如tomcat
    # 启动服务最重要的是端口映射,前面的8080是对外发布的端口,后面的8080是容器中的端口
    docker run -p 8080:8080 tomcat
    # 以上命令启动之后,tomcat的日志会打印在在控制台,这个是前台启动
    # 访问tomcat服务,http://{docker.hostname}:8080
    # 前台启动之后,通过ctrl+c退出,服务就不能访问,需要再次进行启动
    # 先查看tomcat服务,找到CONTAINER ID
     docker ps -a
    # 然后启动
    docker start {CONTAINER ID}
    # tomcat后台启动 -d就是后台启动的意思
    docker run -d -p 8081:8081 tomcat
    # 停止容器
    docker stop  {CONTAINER ID}
    # 删除容器
    docker rm {CONTAINER ID}
    # 移除镜像
    docker rmi {IMAGE ID}
    docker注册中心

    # 获取一个registry的镜像
    docker pull registry
    # 然后启动一个registry镜像
    # 在启动之前先创建一个本地目录
    mkdir -p /opt/docker/registry
    # 然后启动镜像
    docker run -d -v /opt/docker/registry:/var/lib/registry -p 5000:5000 --restart=always --name registry registry
    # 查看容器运行情况
    docker ps 
    # 检查服务是否启动,访问以下地址,返回{}就是正常了。
    http://{docker.hostname}:5000/v2/
    # 开启远程访问权限
    vi /usr/lib/systemd/system/docker.service
    # 输入以下内容,在[Service]部分的最下面添加下面两行:
    ExecStart=
    ExecStart=/usr/bin/dockerd -H tcp://0.0.0.0:2375 -H unix://var/run/docker.sock
    # 重启服务
    systemctl daemon-reload
    systemctl restart docker
    一些错误
    Springboot 整合docker

    springboot整合docker的本质是将springboot项目生成image之后上传到docker 的registry里面。也就会上文中自己定义的仓库。

    第一步:构建springboot项目。

    第二步:修改springbootl的pom文件,新增一个plugin

      <plugin>
                    <groupId>com.spotify</groupId>
                    <artifactId>docker-maven-plugin</artifactId>
                    <version>1.0.0</version>
                    <configuration>
                        <!-- docker私服的地址 -->
                        <dockerHost>http://192.168.2.128:2375</dockerHost>
                        <!--镜像名称以及版本号-->
                        <imageName>usertag-service:1.0.1</imageName>
                        <!--依赖的基础镜像-->
                        <baseImage>java</baseImage>
                        <!--Dockerfile的位置 -->
                        <dockerDirectory>${project.basedir}/src/main/docker</dockerDirectory>
                        <!-- 这里是复制 jar 包到 docker 容器指定目录配置 -->
                        <resources>
                            <resource>
                                <targetPath>/</targetPath>
                                <directory>${project.build.directory}</directory>
                                <include>${project.build.finalName}.jar</include>
                            </resource>
                        </resources>
                    </configuration>
                </plugin>

    第三步:在pom文件中指定docker的registry地址信息

        <properties>
            <java.version>1.8</java.version>
            <docker.registry>192.168.2.128:5000</docker.registry>
        </properties>

    第四步:创建构建镜像脚本

    # 先创建一个目录,在main目录下创建一个docker目录,在docker目录下创建一个文件,取名Dockerfile
    # 目录结构如下:src/main/docker/Dockerfile
    # 打开文件输入一下内容
    FROM java:8
    MAINTAINER "maoxiangyi"<maoxiangyi@aliyun.com>
    ADD userTag-service-0.0.1-SNAPSHOT.jar usertag.jar
    EXPOSE 8089
    CMD java -jar usertag.jar

    第五步:通过mvn命令构建镜像

    mvn docker:build
    # 或者在maven的工具栏中找到docker plugin,然后点击build

    bbb.png

    第六步:在docker中查看镜像服务

    docker images

    aaa.png

    第七步:通过镜像启动服务

    docker run -d -p 8089:8089 {IMAGE ID}

    ccc.png

    第八步:访问接口,以我们的服务为例

    http://node01:8089/tag/query?id=123&version=v2

    ddd.png

    接口测试
    批量创建镜像服务

    docker run -d -p 8089:8089 c400102741d1
    docker run -d -p 8090:8089 c400102741d1
    docker run -d -p 8091:8089 c400102741d1
    docker run -d -p 8092:8089 c400102741d1
    docker run -d -p 8093:8089 c400102741d1
    docker run -d -p 8094:8089 c400102741d1
    docker run -d -p 8095:8089 c400102741d1
    docker run -d -p 8096:8089 c400102741d1
    docker run -d -p 8097:8089 c400102741d1
    docker run -d -p 8098:8089 c400102741d1
    docker run -d -p 8099:8089 c400102741d1
    docker run -d -p 8100:8089 c400102741d1
    docker run -d -p 8101:8089 c400102741d1
    docker run -d -p 8102:8089 c400102741d1
    docker run -d -p 8103:8089 c400102741d1
    安装nginx服务

    # 获取nginx镜像
    docker pull nginx
    # 启动服务
    docker run --name runoob-nginx-test -p 8081:80 -d nginx
     
    # 创建目录,能够自己改配置文件的一种方式
    mkdir -p /opt/nginx/html && mkdir -p /opt/nginx/logs && mkdir -p /opt/nginx/config
    # 拷贝配置文件出来,37f29b277fd0 是上一步启动的docker名称
    docker cp 37f29b277fd0:/etc/nginx/nginx.conf /opt/nginx/config/nginx.conf
    # 启动nginx命令
    docker run -d -p 81:80 --name nginx 
    -v /opt/nginx/html:/usr/share/nginx/html 
    -v /opt/nginx/config/nginx.conf:/etc/nginx/nginx.conf 
    -v /opt/nginx/logs:/var/log/nginx 
    nginx
    #新增网络资源,在nginx上访问
    cd /opt/nginx/html
    vi index.html
    # 输入以下内容
    <!DOCTYPE html>
    <html>
    <head>
    <meta charset="utf-8">
    <title>docker</title>
    </head>
    <body>
       <h1>我是毛祥溢</h1>
       <p>一个神奇的程序员</p>
    </body>
    </html>
    配置nginx的负载均衡

    # 修改配置文件
    vi /opt/nginx/config/nginx.conf
    # 修改配置文件
    user  nginx;
    worker_processes  1;
    error_log  /var/log/nginx/error.log warn;
    pid       /var/run/nginx.pid;
    events {
       worker_connections  1024;
    }
    http {
       include       /etc/nginx/mime.types;
       default_type  application/octet-stream;
       log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                          '$status $body_bytes_sent "$http_referer" '
                          '"$http_user_agent" "$http_x_forwarded_for"';
       access_log  /var/log/nginx/access.log  main;
       sendfile       on;
        #tcp_nopush     on;
       keepalive_timeout  65;
        #gzip  on;
        #include /etc/nginx/conf.d/*.conf;
       upstream api {
         server  192.168.2.128:8089;
         server  192.168.2.128:8090;
         server  192.168.2.128:8092;
         server  192.168.2.128:8093;
         server  192.168.2.128:8094;
         server  192.168.2.128:8095;
         server  192.168.2.128:8006;
         server  192.168.2.128:8097;
         server  192.168.2.128:8098;
         server  192.168.2.128:8099;
         server  192.168.2.128:8100;
         server  192.168.2.128:8101;
         server  192.168.2.128:8102;
         server  192.168.2.128:8103;
           }
       server{
       listen 80;
       server_name localhost;
       location / {
           proxy_pass         http://api;
           proxy_set_header   Host             $host;
           proxy_set_header   X-Real-IP        $remote_addr;
           proxy_set_header   X-Forwarded-For  $proxy_add_x_forwarded_for;
         }
        }
    }
    # 重启服务
    docker restart {nginx docker id}
    # 访问服务
    安装ab测试工具

    yum install -y httpd-tools  
    ab -c 10 -n 1000 http://192.168.2.128:81/tag/query?id=123&version=v2
    nginx性能调优
    • Nginx 有 master 和 worker 两种进程,master 进程用于管理 worker 进程,worker 进程用于 Nginx 服务。

      worker 进程数默认为 1 。

      worker 进程数应该设置为服务器 CPU 的核数。

      vi /usr/local/nginx1.10/conf/nginx.conf
    • 绑定cpu进行计算,提高CPU利用率

      nginx的一个神秘配置worker_cpu_affinity

    • nginx最大打开文件数

      worker_rlimit_nofile 65535;
    • nginx的事件模型,网络通信的模式

      events {
        use epoll;
        worker_connections 65535;
        multi_accept on;
      }
      • nginx采用epoll事件模型,处理效率高。
      • work_connections是单个worker进程允许客户端最大连接数,这个数值一般根据服务器性能和内存来制定,实际最大值就是worker进程数乘以work_connections。
      • multi_accept 告诉nginx收到一个新连接通知后接受尽可能多的连接,默认是on,设置为on后,多个worker按串行方式来处理连接,也就是一个连接只有一个worker被唤醒,其他的处于休眠状态,设置为off后,多个worker按并行方式来处理连接,也就是一个连接会唤醒所有的worker,直到连接分配完毕,没有取得连接的继续休眠。当你的服务器连接数不多时,开启这个参数会让负载有一定的降低,但是当服务器的吞吐量很大时,为了效率,可以关闭这个参数。
    • 开启高效传输模式

      http {
        include mime.types;
        default_type application/octet-stream;
        ……
        sendfile on;
        tcp_nopush on;
        ……
      }
      • Include mime.types : 媒体类型,include 只是一个在当前文件中包含另一个文件内容的指令。
      • default_type application/octet-stream :默认媒体类型足够。
      • sendfile on:开启高效文件传输模式,sendfile指令指定nginx是否调用sendfile函数来输出文件,对于普通应用设为 on,如果用来进行下载等应用磁盘IO重负载应用,可设置为off,以平衡磁盘与网络I/O处理速度,降低系统的负载。注意:如果图片显示不正常把这个改成off。
      • tcp_nopush on:必须在sendfile开启模式才有效,防止网路阻塞,积极的减少网络报文段的数量(将响应头和正文的开始部分一起发送,而不一个接一个的发送。)
    • 设置连接事件

      keepalive_timeout 60;
      tcp_nodelay on;
      client_header_buffer_size 4k;
      open_file_cache max=102400 inactive=20s;
      open_file_cache_valid 30s;
      open_file_cache_min_uses 1;
      client_header_timeout 15;
      client_body_timeout 15;
      reset_timedout_connection on;
      send_timeout 15;
      server_tokens off;
      client_max_body_size 10m;
      • keepalived_timeout :客户端连接保持会话超时时间,超过这个时间,服务器断开这个链接。
      • tcp_nodelay:也是防止网络阻塞,不过要包涵在keepalived参数才有效。
      • client_header_buffer_size 4k:客户端请求头部的缓冲区大小,这个可以根据你的系统分页大小来设置,一般一个请求头的大小不会超过 1k,不过由于一般系统分页都要大于1k,所以这里设置为分页大小。分页大小可以用命令getconf PAGESIZE取得。
      • open_file_cache max=102400 inactive=20s :这个将为打开文件指定缓存,默认是没有启用的,max指定缓存数量,建议和打开文件数一致,inactive 是指经过多长时间文件没被请求后删除缓存。
      • open_file_cache_valid 30s:这个是指多长时间检查一次缓存的有效信息。
      • open_file_cache_min_uses 1 :open_file_cache指令中的inactive 参数时间内文件的最少使用次数,如果超过这个数字,文件描述符一直是在缓存中打开的,如上例,如果有一个文件在inactive 时间内一次没被使用,它将被移除。
      • client_header_timeout : 设置请求头的超时时间。我们也可以把这个设置低些,如果超过这个时间没有发送任何数据,nginx将返回request time out的错误。
      • client_body_timeout设置请求体的超时时间。我们也可以把这个设置低些,超过这个时间没有发送任何数据,和上面一样的错误提示。
      • reset_timeout_connection :告诉nginx关闭不响应的客户端连接。这将会释放那个客户端所占有的内存空间。
      • send_timeout :响应客户端超时时间,这个超时时间仅限于两个活动之间的时间,如果超过这个时间,客户端没有任何活动,nginx关闭连接。
      • server_tokens :并不会让nginx执行的速度更快,但它可以关闭在错误页面中的nginx版本数字,这样对于安全性是有好处的。
      • client_max_body_size:上传文件大小限制。
    • fastcgi 调优

      nginx的缓存功能有:proxy_cache / fastcgi_cache

      proxy_cache的作用是缓存后端服务器的内容,可能是任何内容,包括静态的和动态。

      fastcgi_cache的作用是缓存fastcgi生成的内容,很多情况是php生成的动态的内容。

      proxy_cache缓存减少了nginx与后端通信的次数,节省了传输时间和后端宽带。

      fastcgi_cache缓存减少了nginx与php的通信的次数,更减轻了php和数据库(mysql)的压力。

      fastcgi_connect_timeout 600;
      fastcgi_send_timeout 600;
      fastcgi_read_timeout 600;
      fastcgi_buffer_size 64k;
      fastcgi_buffers 4 64k;
      fastcgi_busy_buffers_size 128k;
      fastcgi_temp_file_write_size 128k;
      fastcgi_temp_path/usr/local/nginx1.10/nginx_tmp;
      fastcgi_intercept_errors on;
      fastcgi_cache_path/usr/local/nginx1.10/fastcgi_cache levels=1:2 keys_zone=cache_fastcgi:128minactive=1d max_size=10g;
      • fastcgi_connect_timeout 600 :指定连接到后端FastCGI的超时时间。
      • fastcgi_send_timeout 600 :向FastCGI传送请求的超时时间。
      • fastcgi_read_timeout 600 :指定接收FastCGI应答的超时时间。
      • fastcgi_buffer_size 64k :指定读取FastCGI应答第一部分需要用多大的缓冲区,默认的缓冲区大小为。fastcgi_buffers指令中的每块大小,可以将这个值设置更小。
      • fastcgi_buffers 4 64k :指定本地需要用多少和多大的缓冲区来缓冲FastCGI的应答请求,如果一个php脚本所产生的页面大小为256KB,那么会分配4个64KB的缓冲区来缓存,如果页面大小大于256KB,那么大于256KB的部分会缓存到fastcgi_temp_path指定的路径中,但是这并不是好方法,因为内存中的数据处理速度要快于磁盘。一般这个值应该为站点中php脚本所产生的页面大小的中间值,如果站点大部分脚本所产生的页面大小为256KB,那么可以把这个值设置为“8 32K”、“4 64k”等。
      • fastcgi_busy_buffers_size 128k :建议设置为fastcgi_buffers的两倍,繁忙时候的buffer。
      • fastcgi_temp_file_write_size 128k :在写入fastcgi_temp_path时将用多大的数据块,默认值是fastcgi_buffers的两倍,该数值设置小时若负载上来时可能报502BadGateway。
      • fastcgi_temp_path :缓存临时目录。
      • fastcgi_intercept_errors on :这个指令指定是否传递4xx和5xx错误信息到客户端,或者允许nginx使用error_page处理错误信息。注:静态文件不存在会返回404页面,但是php页面则返回空白页!
      • fastcgi_cache_path /usr/local/nginx1.10/fastcgi_cachelevels=1:2 keys_zone=cache_fastcgi:128minactive=1d max_size=10g :fastcgi_cache缓存目录,可以设置目录层级,比如1:2会生成16*256个子目录,cache_fastcgi是这个缓存空间的名字,cache是用多少内存(这样热门的内容nginx直接放内存,提高访问速度),inactive表示默认失效时间,如果缓存数据在失效时间内没有被访问,将被删除,max_size表示最多用多少硬盘空间。
      • fastcgi_cache cache_fastcgi :#表示开启FastCGI缓存并为其指定一个名称。开启缓存非常有用,可以有效降低CPU的负载,并且防止502的错误放生。cache_fastcgi为proxy_cache_path指令创建的缓存区名称。
      • fastcgi_cache_valid 200 302 1h :#用来指定应答代码的缓存时间,实例中的值表示将200和302应答缓存一小时,要和fastcgi_cache配合使用。
      • fastcgi_cache_valid 301 1d :将301应答缓存一天。
      • fastcgi_cache_valid any 1m :将其他应答缓存为1分钟。
      • fastcgi_cache_min_uses 1 :该指令用于设置经过多少次请求的相同URL将被缓存。
      • fastcgi_cache_key http://$host$request_uri :该指令用来设置web缓存的Key值,nginx根据Key值md5哈希存储.一般根据$host(域名)、$request_uri(请求的路径)等变量组合成proxy_cache_key 。
      • fastcgi_pass :指定FastCGI服务器监听端口与地址,可以是本机或者其它。
    • gzip压缩

      使用gzip压缩功能,可能为我们节约带宽,加快传输速度,有更好的体验,也为我们节约成本,所以说这是一个重点。

      Nginx启用压缩功能需要你来ngx_http_gzip_module模块,apache使用的是mod_deflate。

      一般我们需要压缩的内容有:文本,js,html,css,对于图片,视频,flash什么的不压缩,同时也要注意,我们使用gzip的功能是需要消耗CPU的!

      gzip on;
      gzip_min_length 2k;
      gzip_buffers   4 32k;
      gzip_http_version 1.1;
      gzip_comp_level 6;
      gzip_typestext/plain text/css text/javascriptapplication/json application/javascript application/x-javascriptapplication/xml;
      gzip_vary on;
      gzip_proxied any;
      • gzip on:开启压缩功能

      • gzip_min_length 1k :设置允许压缩的页面最小字节数,页面字节数从header头的Content-Length中获取,默认值是0,不管页面多大都进行压缩,建议设置成大于1K,如果小与1K可能会越压越大。

      • gzip_buffers 4 32k :压缩缓冲区大小,表示申请4个单位为32K的内存作为压缩结果流缓存,默认值是申请与原始数据大小相同的内存空间来存储gzip压缩结果。

      • gzip_http_version 1.1 :压缩版本,用于设置识别HTTP协议版本,默认是1.1,目前大部分浏览器已经支持GZIP解压,使用默认即可。

      • gzip_comp_level 6 :压缩比例,用来指定GZIP压缩比,1压缩比最小,处理速度最快,9压缩比最大,传输速度快,但是处理慢,也比较消耗CPU资源。

      • gzip_types text/css text/xml application/javascript :用来指定压缩的类型,‘text/html’类型总是会被压缩。默认值: gzip_types text/html (默认不对js/css文件进行压缩)

        • 压缩类型,匹配MIME型进行压缩;
        • 不能用通配符 text/*;
        • text/html默认已经压缩 (无论是否指定);
        • 设置哪压缩种文本文件可参考 conf/mime.types。
      • gzip_vary on :varyheader支持,改选项可以让前端的缓存服务器缓存经过GZIP压缩的页面,例如用Squid缓存经过nginx压缩的数据。

    • expires 缓存调优

      缓存,主要针对于图片,css,js等元素更改机会比较少的情况下使用,特别是图片,占用带宽大,我们完全可以设置图片在浏览器本地缓存365d,css,js,html可以缓存个10来天,这样用户第一次打开加载慢一点,第二次,就非常快了!缓存的时候,我们需要将需要缓存的拓展名列出来, Expires缓存配置在server字段里面。

      location ~* .(ico|jpe?g|gif|png|bmp|swf|flv)$ {
      expires 30d;
      #log_not_found off;
      access_log off;
      }
      location ~* .(js|css)$ {
      expires 7d;
      log_not_found off;
      access_log off;
      }
    • 防盗链

      防止别人直接从你网站引用图片等链接,消耗了你的资源和网络流量,那么我们的解决办法由几种:

      1. 水印,品牌宣传,你的带宽,服务器足够;
      2. 防火墙,直接控制,前提是你知道IP来源;
      3. 防盗链策略下面的方法是直接给予404的错误提示。

      location ~*^.+.(jpg|gif|png|swf|flv|wma|wmv|asf|mp3|mmf|zip|rar)$ {
      valid_referers noneblocked www.benet.com benet.com;
      if($invalid_referer) {
        #return 302 http://www.benet.com/img/nolink.jpg;
        return 404;
        break;
      }
      access_log off;
      }

      参数可以使如下形式:

      • none :意思是不存在的Referer头(表示空的,也就是直接访问,比如直接在浏览器打开一个图片)。
      • blocked :意为根据防火墙伪装Referer头,如:“Referer:XXXXXXX”。
      • server_names :为一个或多个服务器的列表,0.5.33版本以后可以在名称中使用“*”通配符。
    • 内核参数优化

      fs.file-max = 999999
      net.ipv4.ip_forward = 0
      net.ipv4.conf.default.rp_filter = 1
      net.ipv4.conf.default.accept_source_route = 0
      kernel.sysrq = 0
      kernel.core_uses_pid = 1
      net.ipv4.tcp_syncookies = 1
      kernel.msgmnb = 65536
      kernel.msgmax = 65536
      kernel.shmmax = 68719476736
      kernel.shmall = 4294967296
      net.ipv4.tcp_max_tw_buckets = 6000
      net.ipv4.tcp_sack = 1
      net.ipv4.tcp_window_scaling = 1
      net.ipv4.tcp_rmem = 10240 87380 12582912
      net.ipv4.tcp_wmem = 10240 87380 12582912
      net.core.wmem_default = 8388608
      net.core.rmem_default = 8388608
      net.core.rmem_max = 16777216
      net.core.wmem_max = 16777216
      net.core.netdev_max_backlog = 262144
      net.core.somaxconn = 40960
      net.ipv4.tcp_max_orphans = 3276800
      net.ipv4.tcp_max_syn_backlog = 262144
      net.ipv4.tcp_timestamps = 0
      net.ipv4.tcp_synack_retries = 1
      net.ipv4.tcp_syn_retries = 1
      net.ipv4.tcp_tw_recycle = 1
      net.ipv4.tcp_tw_reuse = 1
      net.ipv4.tcp_mem = 94500000 915000000 927000000
      net.ipv4.tcp_fin_timeout = 1
      net.ipv4.tcp_keepalive_time = 30
      net.ipv4.ip_local_port_range = 1024 65000
      执行sysctl  -p使内核修改生效。
      • fs.file-max = 999999:这个参数表示进程(比如一个worker进程)可以同时打开的最大句柄数,这个参数直线限制最大并发连接数,需根据实际情况配置。
      • net.ipv4.tcp_max_tw_buckets = 6000 :这个参数表示操作系统允许TIME_WAIT套接字数量的最大值,如果超过这个数字,TIME_WAIT套接字将立刻被清除并打印警告信息。该参数默认为180000,过多的TIME_WAIT套接字会使Web服务器变慢。注:主动关闭连接的服务端会产生TIME_WAIT状态的连接
      • net.ipv4.ip_local_port_range = 1024 65000 :允许系统打开的端口范围。
      • net.ipv4.tcp_tw_recycle = 1 :启用timewait快速回收。
      • net.ipv4.tcp_tw_reuse = 1 :开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接。这对于服务器来说很有意义,因为服务器上总会有大量TIME-WAIT状态的连接。
      • net.ipv4.tcp_keepalive_time = 30:这个参数表示当keepalive启用时,TCP发送keepalive消息的频度。默认是2小时,若将其设置的小一些,可以更快地清理无效的连接。
      • net.ipv4.tcp_syncookies = 1 :开启SYN Cookies,当出现SYN等待队列溢出时,启用cookies来处理。
      • net.core.somaxconn = 40960 :web 应用中 listen 函数的 backlog 默认会给我们内核参数的。
      • net.core.somaxconn :限制到128,而nginx定义的NGX_LISTEN_BACKLOG 默认为511,所以有必要调整这个值。注:对于一个TCP连接,Server与Client需要通过三次握手来建立网络连接.当三次握手成功后,我们可以看到端口的状态由LISTEN转变为ESTABLISHED,接着这条链路上就可以开始传送数据了.每一个处于监听(Listen)状态的端口,都有自己的监听队列.监听队列的长度与如somaxconn参数和使用该端口的程序中listen()函数有关。somaxconn定义了系统中每一个端口最大的监听队列的长度,这是个全局的参数,默认值为128,对于一个经常处理新连接的高负载 web服务环境来说,默认的 128 太小了。大多数环境这个值建议增加到 1024 或者更多。大的侦听队列对防止拒绝服务 DoS 攻击也会有所帮助。
      • net.core.netdev_max_backlog = 262144 :每个网络接口接收数据包的速率比内核处理这些包的速率快时,允许送到队列的数据包的最大数目。
      • net.ipv4.tcp_max_syn_backlog = 262144 :这个参数标示TCP三次握手建立阶段接受SYN请求队列的最大长度,默认为1024,将其设置得大一些可以使出现Nginx繁忙来不及accept新连接的情况时,Linux不至于丢失客户端发起的连接请求。
      • net.ipv4.tcp_rmem = 10240 87380 12582912 :这个参数定义了TCP接受缓存(用于TCP接受滑动窗口)的最小值、默认值、最大值。
      • net.ipv4.tcp_wmem = 10240 87380 12582912:这个参数定义了TCP发送缓存(用于TCP发送滑动窗口)的最小值、默认值、最大值。
      • net.core.rmem_default = 6291456:这个参数表示内核套接字接受缓存区默认的大小。
      • net.core.wmem_default = 6291456:这个参数表示内核套接字发送缓存区默认的大小。
      • net.core.rmem_max = 12582912:这个参数表示内核套接字接受缓存区的最大大小。
      • net.core.wmem_max = 12582912:这个参数表示内核套接字发送缓存区的最大大小。
      • net.ipv4.tcp_syncookies = 1:该参数与性能无关,用于解决TCP的SYN攻击。
    • 系统连接数优化

      linux 默认值 open files为1024。查看当前系统值:

      # ulimit -n
      1024

      说明server只允许同时打开1024个文件。

      使用ulimit -a 可以查看当前系统的所有限制值,使用ulimit -n 可以查看当前的最大打开文件数。

      新装的linux 默认只有1024 ,当作负载较大的服务器时,很容易遇到error: too many open files。因此,需要将其改大,在/etc/security/limits.conf最后增加:

      *               soft   nofile           65535
      *               hard   nofile           65535
      *               soft   noproc         65535
      *               hard   noproc         65535
  • 相关阅读:
    【ZJOI2017】树状数组
    【ZJOI2014】力
    【WC2017】挑战
    kube event 事件监控
    k8s nginx-ingress 504 timeout
    k8s 工具集
    jvm 性能调优工具之 jmap
    Elasticsearch unassigned 故障排查
    harbor API 与tag 清理
    前后端分离文档
  • 原文地址:https://www.cnblogs.com/maoxiangyi/p/11598828.html
Copyright © 2011-2022 走看看