碼上快樂

相關內容    簡體    繁體

使用docker構建分布式接口服務

本文轉載自   查看原文   2019-09-27 16:37   522    大數據技術

使用docker構建分布式接口服務

docker的安裝
·# 更新軟件包，線上環境慎用
yum update
# 安裝docker
yum install -y docker
# 啟動docker 服務
systemctl start docker
# 查看docker版本
docker version
​
# 查看運行的docker服務
docker ps 
# 查看所有的docker服務
docker ps -a
​
# 查看本地的鏡像,通過鏡像才能啟動服務
docker images
# 拉取docker鏡像，比如 tomcat
docker pull tomcat
​
​
# 設置國內的注冊中心，可以加快鏡像下載速度
vi /et/docker/daemon.json
# 輸入以下內容
{
  "registry-mirrors": ["http://hub-mirror.c.163.com"]
}
#然后重啟docker服務，先停止，然后再啟動。
systemctl stop docker
systemctl start docker
​
​
# 啟動給一個服務，比如tomcat
# 啟動服務最重要的是端口映射，前面的8080是對外發布的端口，后面的8080是容器中的端口
docker run -p 8080:8080 tomcat
# 以上命令啟動之后，tomcat的日志會打印在在控制台，這個是前台啟動
# 訪問tomcat服務，http://{docker.hostname}:8080
# 前台啟動之后，通過ctrl+c退出，服務就不能訪問，需要再次進行啟動
# 先查看tomcat服務，找到CONTAINER ID
 docker ps -a
# 然后啟動
docker start {CONTAINER ID}
# tomcat后台啟動 -d就是后台啟動的意思
docker run -d -p 8081:8081 tomcat
​
# 停止容器
docker stop  {CONTAINER ID}
# 刪除容器
docker rm {CONTAINER ID}
# 移除鏡像
docker rmi {IMAGE ID}
 
        
docker注冊中心
 
         
         
        
# 獲取一個registry的鏡像
docker pull registry
# 然后啟動一個registry鏡像
# 在啟動之前先創建一個本地目錄
mkdir -p /opt/docker/registry
# 然后啟動鏡像
docker run -d -v /opt/docker/registry:/var/lib/registry -p 5000:5000 --restart=always --name registry registry
# 查看容器運行情況
docker ps 
# 檢查服務是否啟動，訪問以下地址，返回{}就是正常了。
http://{docker.hostname}:5000/v2/
# 開啟遠程訪問權限
vi /usr/lib/systemd/system/docker.service
# 輸入以下內容，在[Service]部分的最下面添加下面兩行:
ExecStart=
ExecStart=/usr/bin/dockerd -H tcp://0.0.0.0:2375 -H unix://var/run/docker.sock
# 重啟服務
systemctl daemon-reload
systemctl restart docker
​
 
        
一些錯誤
 
         
        
Springboot 整合docker
 
         
         
        
springboot整合docker的本質是將springboot項目生成image之后上傳到docker 的registry里面。也就會上文中自己定義的倉庫。
 
        
第一步：構建springboot項目。
 
        
第二步：修改springbootl的pom文件，新增一個plugin
 
        
  <plugin>
                <groupId>com.spotify</groupId>
                <artifactId>docker-maven-plugin</artifactId>
                <version>1.0.0</version>
                <configuration>
                    <!-- docker私服的地址 -->
                    <dockerHost>http://192.168.2.128:2375</dockerHost>
                    <!--鏡像名稱以及版本號-->
                    <imageName>usertag-service:1.0.1</imageName>
                    <!--依賴的基礎鏡像-->
                    <baseImage>java</baseImage>
                    <!--Dockerfile的位置 -->
                    <dockerDirectory>${project.basedir}/src/main/docker</dockerDirectory>
                    <!-- 這里是復制 jar 包到 docker 容器指定目錄配置 -->
                    <resources>
                        <resource>
                            <targetPath>/</targetPath>
                            <directory>${project.build.directory}</directory>
                            <include>${project.build.finalName}.jar</include>
                        </resource>
                    </resources>
                </configuration>
            </plugin>
 
         
         
        
第三步：在pom文件中指定docker的registry地址信息
 
        
    <properties>
        <java.version>1.8</java.version>
        <docker.registry>192.168.2.128:5000</docker.registry>
    </properties>
 
        
第四步：創建構建鏡像腳本
 
        
# 先創建一個目錄，在main目錄下創建一個docker目錄，在docker目錄下創建一個文件，取名Dockerfile
# 目錄結構如下：src/main/docker/Dockerfile
# 打開文件輸入一下內容
​
FROM java:8
MAINTAINER "maoxiangyi"<maoxiangyi@aliyun.com>
ADD userTag-service-0.0.1-SNAPSHOT.jar usertag.jar
EXPOSE 8089
CMD java -jar usertag.jar
​
 
        
第五步：通過mvn命令構建鏡像
 
        
mvn docker:build
# 或者在maven的工具欄中找到docker plugin，然后點擊build
 
        
bbb.png
 
        
第六步：在docker中查看鏡像服務
 
        
docker images
 
        
aaa.png
 
        
第七步：通過鏡像啟動服務
 
         
         
        
docker run -d -p 8089:8089 {IMAGE ID}
 
        
ccc.png
 
        
第八步：訪問接口，以我們的服務為例
 
        
http://node01:8089/tag/query?id=123&version=v2
 
        
ddd.png
 
        
接口測試
 
        
批量創建鏡像服務
 
        
docker run -d -p 8089:8089 c400102741d1
docker run -d -p 8090:8089 c400102741d1
docker run -d -p 8091:8089 c400102741d1
docker run -d -p 8092:8089 c400102741d1
docker run -d -p 8093:8089 c400102741d1
docker run -d -p 8094:8089 c400102741d1
docker run -d -p 8095:8089 c400102741d1
docker run -d -p 8096:8089 c400102741d1
docker run -d -p 8097:8089 c400102741d1
docker run -d -p 8098:8089 c400102741d1
docker run -d -p 8099:8089 c400102741d1
docker run -d -p 8100:8089 c400102741d1
docker run -d -p 8101:8089 c400102741d1
docker run -d -p 8102:8089 c400102741d1
docker run -d -p 8103:8089 c400102741d1
 
        
安裝nginx服務
 
        
# 獲取nginx鏡像
docker pull nginx
# 啟動服務
docker run --name runoob-nginx-test -p 8081:80 -d nginx
 
# 創建目錄，能夠自己改配置文件的一種方式
mkdir -p /opt/nginx/html && mkdir -p /opt/nginx/logs && mkdir -p /opt/nginx/config
# 拷貝配置文件出來，37f29b277fd0 是上一步啟動的docker名稱
docker cp 37f29b277fd0:/etc/nginx/nginx.conf /opt/nginx/config/nginx.conf
# 啟動nginx命令
docker run -d -p 81:80 --name nginx \
-v /opt/nginx/html:/usr/share/nginx/html \
-v /opt/nginx/config/nginx.conf:/etc/nginx/nginx.conf \
-v /opt/nginx/logs:/var/log/nginx \
nginx
​
#新增網絡資源，在nginx上訪問
cd /opt/nginx/html
vi index.html
# 輸入以下內容
​
<!DOCTYPE html>
<html>
<head>
<meta charset="utf-8">
<title>docker</title>
</head>
<body>
   <h1>我是毛祥溢</h1>
   <p>一個神奇的程序員</p>
</body>
</html>
 
        
配置nginx的負載均衡
 
        
# 修改配置文件
vi /opt/nginx/config/nginx.conf
# 修改配置文件
​
user  nginx;
worker_processes  1;
​
error_log  /var/log/nginx/error.log warn;
pid       /var/run/nginx.pid;
​
​
events {
   worker_connections  1024;
}
​
​
http {
   include       /etc/nginx/mime.types;
   default_type  application/octet-stream;
​
   log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';
​
   access_log  /var/log/nginx/access.log  main;
​
   sendfile       on;
    #tcp_nopush     on;
​
   keepalive_timeout  65;
​
    #gzip  on;
​
    #include /etc/nginx/conf.d/*.conf;
   upstream api {
     server  192.168.2.128:8089;
     server  192.168.2.128:8090;
     server  192.168.2.128:8092;
     server  192.168.2.128:8093;
     server  192.168.2.128:8094;
     server  192.168.2.128:8095;
     server  192.168.2.128:8006;
     server  192.168.2.128:8097;
     server  192.168.2.128:8098;
     server  192.168.2.128:8099;
     server  192.168.2.128:8100;
     server  192.168.2.128:8101;
     server  192.168.2.128:8102;
     server  192.168.2.128:8103;
       }
​
   server{
   listen 80;
   server_name localhost;
   location / {
       proxy_pass         http://api;
       proxy_set_header   Host             $host;
       proxy_set_header   X-Real-IP        $remote_addr;
       proxy_set_header   X-Forwarded-For  $proxy_add_x_forwarded_for;
     }
    }
}
​
# 重啟服務
docker restart {nginx docker id}
# 訪問服務
 
        
安裝ab測試工具
 
        
yum install -y httpd-tools  
ab -c 10 -n 1000 http://192.168.2.128:81/tag/query?id=123&version=v2
 
        
nginx性能調優
 
        
     
         
  • Nginx 有 master 和 worker 兩種進程，master 進程用於管理 worker 進程，worker 進程用於 Nginx 服務。
    worker 進程數默認為 1 。
    worker 進程數應該設置為服務器 CPU 的核數。
    vi /usr/local/nginx1.10/conf/nginx.conf
    •  
         
  • 綁定cpu進行計算，提高CPU利用率
    nginx的一個神秘配置worker_cpu_affinity
    •  
         
  • nginx最大打開文件數
    worker_rlimit_nofile 65535;
    •  
         
  • nginx的事件模型，網絡通信的模式
    events {
      use epoll;
      worker_connections 65535;
      multi_accept on;
    }
     
          
       
           
    • nginx采用epoll事件模型，處理效率高。 
      •  
           
    • work_connections是單個worker進程允許客戶端最大連接數，這個數值一般根據服務器性能和內存來制定，實際最大值就是worker進程數乘以work_connections。 
      •  
           
    • multi_accept 告訴nginx收到一個新連接通知后接受盡可能多的連接，默認是on，設置為on后，多個worker按串行方式來處理連接，也就是一個連接只有一個worker被喚醒，其他的處於休眠狀態，設置為off后，多個worker按並行方式來處理連接，也就是一個連接會喚醒所有的worker，直到連接分配完畢，沒有取得連接的繼續休眠。當你的服務器連接數不多時，開啟這個參數會讓負載有一定的降低，但是當服務器的吞吐量很大時，為了效率，可以關閉這個參數。
      •  
          
    •  
         
  • 開啟高效傳輸模式
    http {
      include mime.types;
      default_type application/octet-stream;
      ……
    ​
      sendfile on;
      tcp_nopush on;
      ……
    }
     
          
       
           
    • Include mime.types ： 媒體類型,include 只是一個在當前文件中包含另一個文件內容的指令。 
      •  
           
    • default_type application/octet-stream ：默認媒體類型足夠。 
      •  
           
    • sendfile on：開啟高效文件傳輸模式，sendfile指令指定nginx是否調用sendfile函數來輸出文件，對於普通應用設為 on，如果用來進行下載等應用磁盤IO重負載應用，可設置為off，以平衡磁盤與網絡I/O處理速度，降低系統的負載。注意：如果圖片顯示不正常把這個改成off。 
      •  
           
    • tcp_nopush on：必須在sendfile開啟模式才有效，防止網路阻塞，積極的減少網絡報文段的數量（將響應頭和正文的開始部分一起發送，而不一個接一個的發送。）
      •  
          
    •  
         
  • 設置連接事件
    keepalive_timeout 60;
    tcp_nodelay on;
    client_header_buffer_size 4k;
    open_file_cache max=102400 inactive=20s;
    open_file_cache_valid 30s;
    open_file_cache_min_uses 1;
    client_header_timeout 15;
    client_body_timeout 15;
    reset_timedout_connection on;
    send_timeout 15;
    server_tokens off;
    client_max_body_size 10m;
     
          
       
           
    • keepalived_timeout ：客戶端連接保持會話超時時間，超過這個時間，服務器斷開這個鏈接。 
      •  
           
    • tcp_nodelay：也是防止網絡阻塞，不過要包涵在keepalived參數才有效。 
      •  
           
    • client_header_buffer_size 4k：客戶端請求頭部的緩沖區大小，這個可以根據你的系統分頁大小來設置，一般一個請求頭的大小不會超過 1k，不過由於一般系統分頁都要大於1k，所以這里設置為分頁大小。分頁大小可以用命令getconf PAGESIZE取得。 
      •  
           
    • open_file_cache max=102400 inactive=20s ：這個將為打開文件指定緩存，默認是沒有啟用的，max指定緩存數量，建議和打開文件數一致，inactive 是指經過多長時間文件沒被請求后刪除緩存。 
      •  
           
    • open_file_cache_valid 30s：這個是指多長時間檢查一次緩存的有效信息。 
      •  
           
    • open_file_cache_min_uses 1 ：open_file_cache指令中的inactive 參數時間內文件的最少使用次數，如果超過這個數字，文件描述符一直是在緩存中打開的，如上例，如果有一個文件在inactive 時間內一次沒被使用，它將被移除。 
      •  
           
    • client_header_timeout ： 設置請求頭的超時時間。我們也可以把這個設置低些，如果超過這個時間沒有發送任何數據，nginx將返回request time out的錯誤。 
      •  
           
    • client_body_timeout設置請求體的超時時間。我們也可以把這個設置低些，超過這個時間沒有發送任何數據，和上面一樣的錯誤提示。 
      •  
           
    • reset_timeout_connection ：告訴nginx關閉不響應的客戶端連接。這將會釋放那個客戶端所占有的內存空間。 
      •  
           
    • send_timeout ：響應客戶端超時時間，這個超時時間僅限於兩個活動之間的時間，如果超過這個時間，客戶端沒有任何活動，nginx關閉連接。 
      •  
           
    • server_tokens ：並不會讓nginx執行的速度更快，但它可以關閉在錯誤頁面中的nginx版本數字，這樣對於安全性是有好處的。 
      •  
           
    • client_max_body_size：上傳文件大小限制。
      •  
          
    •  
        
 
        
     
         
  • fastcgi 調優
    nginx的緩存功能有：proxy_cache / fastcgi_cache
    proxy_cache的作用是緩存后端服務器的內容，可能是任何內容，包括靜態的和動態。
    fastcgi_cache的作用是緩存fastcgi生成的內容，很多情況是php生成的動態的內容。
    proxy_cache緩存減少了nginx與后端通信的次數，節省了傳輸時間和后端寬帶。
    fastcgi_cache緩存減少了nginx與php的通信的次數，更減輕了php和數據庫(mysql)的壓力。
    fastcgi_connect_timeout 600;
    fastcgi_send_timeout 600;
    fastcgi_read_timeout 600;
    fastcgi_buffer_size 64k;
    fastcgi_buffers 4 64k;
    fastcgi_busy_buffers_size 128k;
    fastcgi_temp_file_write_size 128k;
    fastcgi_temp_path/usr/local/nginx1.10/nginx_tmp;
    fastcgi_intercept_errors on;
    fastcgi_cache_path/usr/local/nginx1.10/fastcgi_cache levels=1:2 keys_zone=cache_fastcgi:128minactive=1d max_size=10g;
     
          
       
           
    • fastcgi_connect_timeout 600 ：指定連接到后端FastCGI的超時時間。 
      •  
           
    • fastcgi_send_timeout 600 ：向FastCGI傳送請求的超時時間。 
      •  
           
    • fastcgi_read_timeout 600 ：指定接收FastCGI應答的超時時間。 
      •  
           
    • fastcgi_buffer_size 64k ：指定讀取FastCGI應答第一部分需要用多大的緩沖區，默認的緩沖區大小為。fastcgi_buffers指令中的每塊大小，可以將這個值設置更小。 
      •  
           
    • fastcgi_buffers 4 64k ：指定本地需要用多少和多大的緩沖區來緩沖FastCGI的應答請求，如果一個php腳本所產生的頁面大小為256KB，那么會分配4個64KB的緩沖區來緩存，如果頁面大小大於256KB，那么大於256KB的部分會緩存到fastcgi_temp_path指定的路徑中，但是這並不是好方法，因為內存中的數據處理速度要快於磁盤。一般這個值應該為站點中php腳本所產生的頁面大小的中間值，如果站點大部分腳本所產生的頁面大小為256KB，那么可以把這個值設置為“8 32K”、“4 64k”等。 
      •  
           
    • fastcgi_busy_buffers_size 128k ：建議設置為fastcgi_buffers的兩倍，繁忙時候的buffer。 
      •  
           
    • fastcgi_temp_file_write_size 128k ：在寫入fastcgi_temp_path時將用多大的數據塊，默認值是fastcgi_buffers的兩倍，該數值設置小時若負載上來時可能報502BadGateway。 
      •  
           
    • fastcgi_temp_path ：緩存臨時目錄。 
      •  
           
    • fastcgi_intercept_errors on ：這個指令指定是否傳遞4xx和5xx錯誤信息到客戶端，或者允許nginx使用error_page處理錯誤信息。注：靜態文件不存在會返回404頁面，但是php頁面則返回空白頁！ 
      •  
           
    • fastcgi_cache_path /usr/local/nginx1.10/fastcgi_cachelevels=1:2 keys_zone=cache_fastcgi:128minactive=1d max_size=10g ：fastcgi_cache緩存目錄，可以設置目錄層級，比如1:2會生成16*256個子目錄，cache_fastcgi是這個緩存空間的名字，cache是用多少內存（這樣熱門的內容nginx直接放內存，提高訪問速度），inactive表示默認失效時間，如果緩存數據在失效時間內沒有被訪問,將被刪除，max_size表示最多用多少硬盤空間。 
      •  
           
    • fastcgi_cache cache_fastcgi ：#表示開啟FastCGI緩存並為其指定一個名稱。開啟緩存非常有用，可以有效降低CPU的負載，並且防止502的錯誤放生。cache_fastcgi為proxy_cache_path指令創建的緩存區名稱。 
      •  
           
    • fastcgi_cache_valid 200 302 1h ：#用來指定應答代碼的緩存時間，實例中的值表示將200和302應答緩存一小時，要和fastcgi_cache配合使用。 
      •  
           
    • fastcgi_cache_valid 301 1d ：將301應答緩存一天。 
      •  
           
    • fastcgi_cache_valid any 1m ：將其他應答緩存為1分鍾。 
      •  
           
    • fastcgi_cache_min_uses 1 ：該指令用於設置經過多少次請求的相同URL將被緩存。 
      •  
           
    • fastcgi_cache_key http://$host$request_uri ：該指令用來設置web緩存的Key值,nginx根據Key值md5哈希存儲.一般根據$host(域名)、$request_uri(請求的路徑)等變量組合成proxy_cache_key 。 
      •  
           
    • fastcgi_pass ：指定FastCGI服務器監聽端口與地址，可以是本機或者其它。
      •  
          
    •  
        
 
        
     
         
  • gzip壓縮
    使用gzip壓縮功能，可能為我們節約帶寬，加快傳輸速度，有更好的體驗，也為我們節約成本，所以說這是一個重點。
    Nginx啟用壓縮功能需要你來ngx_http_gzip_module模塊，apache使用的是mod_deflate。
    一般我們需要壓縮的內容有：文本，js，html，css，對於圖片，視頻，flash什么的不壓縮，同時也要注意，我們使用gzip的功能是需要消耗CPU的！
    gzip on;
    gzip_min_length 2k;
    gzip_buffers   4 32k;
    gzip_http_version 1.1;
    gzip_comp_level 6;
    gzip_typestext/plain text/css text/javascriptapplication/json application/javascript application/x-javascriptapplication/xml;
    gzip_vary on;
    gzip_proxied any;
     
          
       
           
    • gzip on：開啟壓縮功能
      •  
           
    • gzip_min_length 1k ：設置允許壓縮的頁面最小字節數，頁面字節數從header頭的Content-Length中獲取，默認值是0，不管頁面多大都進行壓縮，建議設置成大於1K，如果小與1K可能會越壓越大。
      •  
           
    • gzip_buffers 4 32k ：壓縮緩沖區大小，表示申請4個單位為32K的內存作為壓縮結果流緩存，默認值是申請與原始數據大小相同的內存空間來存儲gzip壓縮結果。
      •  
           
    • gzip_http_version 1.1 ：壓縮版本，用於設置識別HTTP協議版本，默認是1.1，目前大部分瀏覽器已經支持GZIP解壓，使用默認即可。
      •  
           
    • gzip_comp_level 6 ：壓縮比例，用來指定GZIP壓縮比，1壓縮比最小，處理速度最快，9壓縮比最大，傳輸速度快，但是處理慢，也比較消耗CPU資源。
      •  
           
    • gzip_types text/css text/xml application/javascript ：用來指定壓縮的類型，‘text/html’類型總是會被壓縮。默認值: gzip_types text/html (默認不對js/css文件進行壓縮)
       
            
         
             
      • 壓縮類型，匹配MIME型進行壓縮； 
        •  
             
      • 不能用通配符 text/*； 
        •  
             
      • text/html默認已經壓縮 (無論是否指定)； 
        •  
             
      • 設置哪壓縮種文本文件可參考 conf/mime.types。
        •  
            
      •  
           
    • gzip_vary on ：varyheader支持，改選項可以讓前端的緩存服務器緩存經過GZIP壓縮的頁面，例如用Squid緩存經過nginx壓縮的數據。
      •  
          
    •  
        
 
        
     
         
  • expires 緩存調優
    緩存，主要針對於圖片，css，js等元素更改機會比較少的情況下使用，特別是圖片，占用帶寬大，我們完全可以設置圖片在瀏覽器本地緩存365d，css，js，html可以緩存個10來天，這樣用戶第一次打開加載慢一點，第二次，就非常快了！緩存的時候，我們需要將需要緩存的拓展名列出來， Expires緩存配置在server字段里面。
    location ~* \.(ico|jpe?g|gif|png|bmp|swf|flv)$ {
    expires 30d;
    #log_not_found off;
    access_log off;
    }
    ​
    location ~* \.(js|css)$ {
    expires 7d;
    log_not_found off;
    access_log off;
    }
    •  
        
 
        
     
         
  • 防盜鏈
    防止別人直接從你網站引用圖片等鏈接，消耗了你的資源和網絡流量，那么我們的解決辦法由幾種：
     
          
       
           
    1. 水印，品牌宣傳，你的帶寬，服務器足夠； 
      2.  
           
    2. 防火牆，直接控制，前提是你知道IP來源； 
      3.  
           
    3. 防盜鏈策略下面的方法是直接給予404的錯誤提示。
      4.  
          
    location ~*^.+\.(jpg|gif|png|swf|flv|wma|wmv|asf|mp3|mmf|zip|rar)$ {
    valid_referers noneblocked www.benet.com benet.com;
    if($invalid_referer) {
      #return 302 http://www.benet.com/img/nolink.jpg;
      return 404;
      break;
    }
    access_log off;
    }
    參數可以使如下形式：
     
          
       
           
    • none ：意思是不存在的Referer頭(表示空的，也就是直接訪問，比如直接在瀏覽器打開一個圖片)。 
      •  
           
    • blocked ：意為根據防火牆偽裝Referer頭，如：“Referer:XXXXXXX”。 
      •  
           
    • server_names ：為一個或多個服務器的列表，0.5.33版本以后可以在名稱中使用“*”通配符。
      •  
          
    •  
         
  • 內核參數優化
    fs.file-max = 999999
    net.ipv4.ip_forward = 0
    net.ipv4.conf.default.rp_filter = 1
    net.ipv4.conf.default.accept_source_route = 0
    kernel.sysrq = 0
    kernel.core_uses_pid = 1
    net.ipv4.tcp_syncookies = 1
    kernel.msgmnb = 65536
    kernel.msgmax = 65536
    kernel.shmmax = 68719476736
    kernel.shmall = 4294967296
    net.ipv4.tcp_max_tw_buckets = 6000
    net.ipv4.tcp_sack = 1
    net.ipv4.tcp_window_scaling = 1
    net.ipv4.tcp_rmem = 10240 87380 12582912
    net.ipv4.tcp_wmem = 10240 87380 12582912
    net.core.wmem_default = 8388608
    net.core.rmem_default = 8388608
    net.core.rmem_max = 16777216
    net.core.wmem_max = 16777216
    net.core.netdev_max_backlog = 262144
    net.core.somaxconn = 40960
    net.ipv4.tcp_max_orphans = 3276800
    net.ipv4.tcp_max_syn_backlog = 262144
    net.ipv4.tcp_timestamps = 0
    net.ipv4.tcp_synack_retries = 1
    net.ipv4.tcp_syn_retries = 1
    net.ipv4.tcp_tw_recycle = 1
    net.ipv4.tcp_tw_reuse = 1
    net.ipv4.tcp_mem = 94500000 915000000 927000000
    net.ipv4.tcp_fin_timeout = 1
    net.ipv4.tcp_keepalive_time = 30
    net.ipv4.ip_local_port_range = 1024 65000
    ​
    執行sysctl  -p使內核修改生效。
     
          
       
           
    • fs.file-max = 999999：這個參數表示進程（比如一個worker進程）可以同時打開的最大句柄數，這個參數直線限制最大並發連接數，需根據實際情況配置。 
      •  
           
    • net.ipv4.tcp_max_tw_buckets = 6000 ：這個參數表示操作系統允許TIME_WAIT套接字數量的最大值，如果超過這個數字，TIME_WAIT套接字將立刻被清除並打印警告信息。該參數默認為180000，過多的TIME_WAIT套接字會使Web服務器變慢。注：主動關閉連接的服務端會產生TIME_WAIT狀態的連接 
      •  
           
    • net.ipv4.ip_local_port_range = 1024 65000 ：允許系統打開的端口范圍。 
      •  
           
    • net.ipv4.tcp_tw_recycle = 1 ：啟用timewait快速回收。 
      •  
           
    • net.ipv4.tcp_tw_reuse = 1 ：開啟重用。允許將TIME-WAIT sockets重新用於新的TCP連接。這對於服務器來說很有意義，因為服務器上總會有大量TIME-WAIT狀態的連接。 
      •  
           
    • net.ipv4.tcp_keepalive_time = 30：這個參數表示當keepalive啟用時，TCP發送keepalive消息的頻度。默認是2小時，若將其設置的小一些，可以更快地清理無效的連接。 
      •  
           
    • net.ipv4.tcp_syncookies = 1 ：開啟SYN Cookies，當出現SYN等待隊列溢出時，啟用cookies來處理。 
      •  
           
    • net.core.somaxconn = 40960 ：web 應用中 listen 函數的 backlog 默認會給我們內核參數的。 
      •  
           
    • net.core.somaxconn ：限制到128，而nginx定義的NGX_LISTEN_BACKLOG 默認為511，所以有必要調整這個值。注：對於一個TCP連接，Server與Client需要通過三次握手來建立網絡連接.當三次握手成功后,我們可以看到端口的狀態由LISTEN轉變為ESTABLISHED,接着這條鏈路上就可以開始傳送數據了.每一個處於監聽(Listen)狀態的端口,都有自己的監聽隊列.監聽隊列的長度與如somaxconn參數和使用該端口的程序中listen()函數有關。somaxconn定義了系統中每一個端口最大的監聽隊列的長度,這是個全局的參數,默認值為128，對於一個經常處理新連接的高負載 web服務環境來說，默認的 128 太小了。大多數環境這個值建議增加到 1024 或者更多。大的偵聽隊列對防止拒絕服務 DoS 攻擊也會有所幫助。 
      •  
           
    • net.core.netdev_max_backlog = 262144 ：每個網絡接口接收數據包的速率比內核處理這些包的速率快時，允許送到隊列的數據包的最大數目。 
      •  
           
    • net.ipv4.tcp_max_syn_backlog = 262144 ：這個參數標示TCP三次握手建立階段接受SYN請求隊列的最大長度，默認為1024，將其設置得大一些可以使出現Nginx繁忙來不及accept新連接的情況時，Linux不至於丟失客戶端發起的連接請求。 
      •  
           
    • net.ipv4.tcp_rmem = 10240 87380 12582912 ：這個參數定義了TCP接受緩存（用於TCP接受滑動窗口）的最小值、默認值、最大值。 
      •  
           
    • net.ipv4.tcp_wmem = 10240 87380 12582912：這個參數定義了TCP發送緩存（用於TCP發送滑動窗口）的最小值、默認值、最大值。 
      •  
           
    • net.core.rmem_default = 6291456：這個參數表示內核套接字接受緩存區默認的大小。 
      •  
           
    • net.core.wmem_default = 6291456：這個參數表示內核套接字發送緩存區默認的大小。 
      •  
           
    • net.core.rmem_max = 12582912：這個參數表示內核套接字接受緩存區的最大大小。 
      •  
           
    • net.core.wmem_max = 12582912：這個參數表示內核套接字發送緩存區的最大大小。 
      •  
           
    • net.ipv4.tcp_syncookies = 1：該參數與性能無關，用於解決TCP的SYN攻擊。
      •  
          
    •  
        
 
        
     
         
  • 系統連接數優化
    linux 默認值 open files為1024。查看當前系統值：
    # ulimit -n
    1024
    說明server只允許同時打開1024個文件。
    使用ulimit -a 可以查看當前系統的所有限制值，使用ulimit -n 可以查看當前的最大打開文件數。
    新裝的linux 默認只有1024 ，當作負載較大的服務器時，很容易遇到error: too many open files。因此，需要將其改大，在/etc/security/limits.conf最后增加：
    *               soft   nofile           65535
    *               hard   nofile           65535
    *               soft   noproc         65535
    *               hard   noproc         65535
    •  
        
 
       
 
        
       
 
        
 
 
       
 
        
       
 
       
 
      
 
      
 
      
 
     
 
     
 
      
 
      
 
        
       
免責聲明！
 
       
本站轉載的文章為個人學習借鑒使用，本站對版權不負任何法律責任。如果侵犯了您的隱私權益，請聯系本站郵箱yoyou2525@163.com刪除。
 
      
 
      

      
 
     
 
    
 
     
    
 
     
 
      猜您在找 
        使用Swoole 構建API接口服務  
        輕松構建微服務之分布式配置中心  
        zookeeper分布式協調服務的使用一  
        使用horovod構建分布式深度學習框架  
        使用zipKin構建NetCore分布式鏈路跟蹤  
        Jenkins分布式構建與並行構建  
        分布式接口的調用  
        使用Docker搭建Hadoop集群(偽分布式與完全分布式)  
        使用docker搭建selenium grid 分布式環境  
        使用Docker在本地搭建Hadoop分布式集群  
      
 
      
 
     
 
    
 
   
 
  
 
  

    
  
 
  
 
   
 
   
 
   
 
    粵ICP備18138465號  
    © 2018-2025 CODEPRJ.COM