TCP网络参数调优。

喜欢ヅ旅行 2024-02-18 22:08 53阅读 0赞

要能够建立一个TCP连接，必须知道对方的IP和一个未被使用的端口号，由于32位操作系统的端口号通常由两个字节表示，也就是只有65535个，所以一台主机能够同时建立的连接数是有限的，当然操作系统还有一些0~1024是受保护的，如80端口、22端口，这些端口都不能被随意占用。  
在Linux中可以通过查看/proc/sys/net/ipv4/ip\_local\_port\_range文件来知道当前这个主机可以使用的端口范围，如下图所示。

![70][]  
上图表示可以使用的端口为61000-42768=18232。如果可以分配的端口号偏少，再遇到大量并发请求时就会成为瓶颈，由于端口有限导致大量请求等待建立链接，这样性能就会压不上去。另外如果发现有大量的TIME\_WAIT的话，可以设置/proc/sys/net/ipv4/tcp\_fin\_timeout为更小的值来快速释放请求。我们通过另外一主机用 ab -c 30 -n 1000000 10.232.101.208:8080/ 来压测这台机器，看看网络的连接情况，如下图所示。

![70 1][]  
可以看出TIME\_WAIT的连接有26364个，我们设置sudu sh -c "echo 3 > /proc/sys/net/ipv4/tcp\_fin\_timeout"后再进行测试，如下图所示。  
![70 2][]  
调整后TIME\_WAIT的数量明显减少，除了增大端口范围之外，还可以让TCP连接复用等，这些调优参数如下表所示。

<table> 
 <thead> 
  <tr> 
   <th>网络参数</th> 
   <th>说明</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>echo "1024 65535" &gt;/proc/sys/net/ipv4/ip_local_port_range</td> 
   <td>设置向外连接可用端口范围</td> 
  </tr> 
  <tr> 
   <td>echo 1 &gt;/proc/sys/net/ipv4/tcp_tw_reuse</td> 
   <td>设置time_wait连接重用</td> 
  </tr> 
  <tr> 
   <td>echo 1 &gt;/proc/sys/net/ipv4/tcp_tw_recycle</td> 
   <td>设置快速回收time_wait连接</td> 
  </tr> 
  <tr> 
   <td>echo 180000 &gt;/proc/sys/net/ipv4/tcp_max_tw_buckets</td> 
   <td>设置最大time_wait连接长度</td> 
  </tr> 
  <tr> 
   <td>echo 0 &gt;/proc/sys/net/ipv4/tcp_timestamps</td> 
   <td>表示是否启用以一种比超时重发更精确的方法来启用对RTT的计算</td> 
  </tr> 
  <tr> 
   <td>echo 1 &gt;/proc/sys/net/ipv4/tcp_window_scaling</td> 
   <td>设置TCP/IP会话的滑动窗口大小是否可变</td> 
  </tr> 
  <tr> 
   <td>echo 20000 &gt;/proc/sys/net/ipv4/tcp_max_syn_backlog</td> 
   <td>设置最大等待处于客户端还没有应答回来的连接数</td> 
  </tr> 
  <tr> 
   <td>echo 10000 &gt;/proc/sys/net/core/somaxconn</td> 
   <td>设置每一个处于监听状态的端口的监听队列的长度</td> 
  </tr> 
  <tr> 
   <td>echo 2000000 &gt;/proc/sys/fs/file-max</td> 
   <td>设置最大打开文件数</td> 
  </tr> 
  <tr> 
   <td>esho 15 &gt;/proc/sys/net/ipv4/tcp_fin_timeout</td> 
   <td>设置FIN-WAIT-2状态等待回收时间</td> 
  </tr> 
  <tr> 
   <td>esho 16777216 &gt;/proc/sys/net/core/mem_max</td> 
   <td>设置最大的系统套接字数据接收缓冲大小</td> 
  </tr> 
  <tr> 
   <td>esho 262144 &gt;/proc/sys/net/core/mem_default</td> 
   <td>设置默认的系统套接字数据接收缓冲大小</td> 
  </tr> 
  <tr> 
   <td>esho 16777216 &gt;/proc/sys/net/core/wmen_max</td> 
   <td>设置最大的系统套接字数据发送缓存大小</td> 
  </tr> 
  <tr> 
   <td>esho 262144 &gt;/proc/sys/net/core/wmen_default</td> 
   <td>设置默认的系统套接字数据发送缓冲大小</td> 
  </tr> 
  <tr> 
   <td>echo "4096 87380 16777216" &gt;/proc/sys/net/ipv4/tcp_rmem</td> 
   <td>设置最大的TCP数据发送缓冲大小，三个值分别是最小、默认和最大值</td> 
  </tr> 
  <tr> 
   <td>echo "4096 65536 16777216" &gt;/proc/sys/net/ipv4/tcp_wmem</td> 
   <td>设置默认的TCP数据接收缓冲大小，三个值分别是最小、默认和最大值</td> 
  </tr> 
 </tbody> 
</table>

注意，以上设置都是临时性的，系统重新启动后会丢失。另外，Linux还提供了一些工具可用于查看当前的TCP统计信息，如下所示。

*  cat /proc/net/netstat：查看TCP的统计信息。
 *  cat /proc/net/snmp：查看当前系统的连接情况。
 *  netstat -s：查看网络的统计信息。

[70]: https://image.dandelioncloud.cn/pgy_files/images/2024/01/29/989051f9abc3408685ab58d3a6bc1621.png
[70 1]: https://image.dandelioncloud.cn/pgy_files/images/2024/01/29/a4e4856afd43419592f1c65bdae169d1.png
[70 2]: https://image.dandelioncloud.cn/pgy_files/images/2024/01/29/d721fa99d6994d7b873f1f33f14732c1.png