← 返回目录

如何确定最大传输速度?

第 128 / 185 卷日期:

在前面我们知道了 TCP 的传输速度,受制于发送窗口与接收窗口,以及网络设备传输能力。其中,窗口大小由内核缓冲区大小决定。如果缓冲区与网络传输能力匹配,那么缓冲区的利用率就达到了最大化。

问题来了,如何计算网络的传输能力呢?

相信大家都知道网络是有「带宽」限制的,带宽描述的是网络传输能力,它与内核缓冲区的计量单位不同:

带宽是单位时间内的流量,表达是「速度」,比如常见的带宽 100 MB/s;

缓冲区单位是字节,当网络速度乘以时间才能得到字节数;

这里需要说一个概念,就是带宽时延积,它决定网络中飞行报文的大小,它的计算方式:

比如最大带宽是 100 MB/s,网络时延(RTT)是 10ms 时,意味着客户端到服务端的网络一共可以存放 100MB/s

  • 0.01s = 1MB 的字节。

这个 1MB 是带宽和时延的乘积,所以它就叫「带宽时延积」(缩写为 BDP,Bandwidth Delay Product)。同时,这 1MB 也表示「飞行中」的 TCP 报文大小,它们就在网络线路、路由器等网络设备上。如果飞行报文超过了

1 MB,就会导致网络过载,容易丢包。

由于发送缓冲区大小决定了发送窗口的上限,而发送窗口又决定了「已发送未确认」的飞行报文的上限。因此,发送缓冲区不能超过「带宽时延积」。

发送缓冲区与带宽时延积的关系:

如果发送缓冲区「超过」带宽时延积,超出的部分就没办法有效的网络传输,同时导致网络过载,容易丢包;

如果发送缓冲区「小于」带宽时延积,就不能很好的发挥出网络的传输效率。

所以,发送缓冲区的大小最好是往带宽时延积靠近。

怎样调整缓冲区大小?

在 Linux 中发送缓冲区和接收缓冲都是可以用参数调节的。设置完后,Linux 会根据你设置的缓冲区进行动态调节。

调节发送缓冲区范围

上面三个数字单位都是字节,它们分别表示:

第一个数值是动态范围的最小值,4096 byte = 4K;

第二个数值是初始默认值,87380 byte ≈ 86K;

第三个数值是动态范围的最大值,4194304 byte = 4096K(4M);

发送缓冲区是自行调节的,当发送方发送的数据被确认后,并且没有新的数据要发送,就会把发送缓冲区的内存释放掉。

调节接收缓冲区范围

而接收缓冲区的调整就比较复杂一些,先来看看设置接收缓冲区范围的 tcp_rmem 参数:

上面三个数字单位都是字节,它们分别表示:

第一个数值是动态范围的最小值,表示即使在内存压力下也可以保证的最小接收缓冲区大小,4096 byte = 4K;

第二个数值是初始默认值,87380 byte ≈ 86K;

第三个数值是动态范围的最大值,6291456 byte = 6144K(6M);

接收缓冲区可以根据系统空闲内存的大小来调节接收窗口:

如果系统的空闲内存很多,就可以自动把缓冲区增大一些,这样传给对方的接收窗口也会变大,因而提升发送方发送的传输数据数量;

反之,如果系统的内存很紧张,就会减少缓冲区,这虽然会降低传输效率,可以保证更多的并发连接正常工

调节 TCP 内存范围

接收缓冲区调节时,怎么知道当前内存是否紧张或充分呢?这是通过 tcp_mem 配置完成的:

上面三个数字单位不是字节,而是「页面大小」,1 页表示 4KB,它们分别表示:

当 TCP 内存小于第 1 个值时,不需要进行自动调节;

在第 1 和第 2 个值之间时,内核开始调节接收缓冲区的大小;

大于第 3 个值时,内核不再为 TCP 分配新内存,此时新连接是无法建立的;

一般情况下这些值是在系统启动时根据系统内存数量计算得到的。根据当前 tcp_mem 最大内存页面数是 177120,当内存为 (177120 * 4) / 1024K ≈ 692M 时,系统将无法为新的 TCP 连接分配内存,即 TCP 连接将被拒

绝。

根据实际场景调节的策略

在高并发服务器中,为了兼顾网速与大量的并发连接,我们应当保证缓冲区的动态调整的最大值达到带宽时延积,而最小值保持默认的 4K 不变即可。而对于内存紧张的服务而言,调低默认值是提高并发的有效手段。

同时,如果这是网络 IO 型服务器,那么,调大 tcp_mem 的上限可以让 TCP 连接使用更多的系统内存,这有利于提升并发能力。需要注意的是,tcp_wmem 和 tcp_rmem 的单位是字节,而 tcp_mem 的单位是页面大小。而且,

千万不要在 socket 上直接设置 SO_SNDBUF 或者 SO_RCVBUF,这样会关闭缓冲区的动态调整功能。

全站分卷索引 · 185 卷
  1. 1前言
  2. 2勘误事宜
  3. 3应用层
  4. 4网络层
  5. 5数据链路层
  6. 6物理层
  7. 7总结
  8. 8二、HTTP 篇
  9. 9HTTP 基本概念
  10. 10GET 与 POST
  11. 11HTTP 特性
  12. 12HTTP 与 HTTPS
  13. 13HTTP/1.1、HTTP/2、HTTP/3 演变
  14. 14读者问答
  15. 15最后
  16. 162.2 HTTP/1.1如何优化?
  17. 17如何减少 HTTP 请求次数?
  18. 18减少重定向请求次数
  19. 19合并请求
  20. 20延迟发送请求
  21. 21无损压缩
  22. 22总结
  23. 23最后
  24. 242.3 HTTPS RSA 握手解析
  25. 25RSA 握手过程
  26. 26TLS 第一次握手
  27. 27客户端验证证书
  28. 28证书链
  29. 29TLS 第三次握手
  30. 30TLS 第四次握手
  31. 31最后
  32. 322.4 HTTPS ECDHE 握手解析
  33. 33离散对数
  34. 34DH 算法
  35. 35DHE 算法
  36. 36ECDHE 算法
  37. 37TLS 第一次握手
  38. 38TLS 第三次握手
  39. 39TLS 第四次握手
  40. 40总结
  41. 412.5 HTTPS 如何优化?
  42. 42分析性能损耗
  43. 43硬件优化
  44. 44软件优化
  45. 45密钥交换算法优化
  46. 46TLS 升级
  47. 47证书优化
  48. 48OCSP
  49. 49OCSP Stapling
  50. 50会话复用
  51. 51Session Ticket
  52. 52Pre-shared Key
  53. 53总结
  54. 54最后
  55. 552.6 HTTP/2 牛逼在哪?
  56. 56HTTP/1.1 协议的性能问题
  57. 57头部压缩
  58. 58静态表编码
  59. 59动态表编码
  60. 60二进制帧
  61. 61并发传输
  62. 62服务器主动推送资源
  63. 63总结
  64. 64最后
  65. 65美中不足的 HTTP/2
  66. 66TCP 与 TLS 的握手时延迟
  67. 67网络迁移需要重新连接
  68. 68QUIC 协议的特点
  69. 69更快的连接建立
  70. 70连接迁移
  71. 71总结
  72. 72最后
  73. 73三、TCP 篇
  74. 74TCP 基本认识
  75. 75TCP 连接建立
  76. 76TCP 连接断开
  77. 77Socket 编程
  78. 78读者问答
  79. 79最后
  80. 803.2 TCP 重传、滑动窗口、流量控制、拥塞控制
  81. 81重传机制
  82. 82超时重传
  83. 83快速重传
  84. 84SACK 方法
  85. 85滑动窗口
  86. 86流量控制
  87. 87操作系统缓冲区与滑动窗口的关系
  88. 88窗口关闭
  89. 89糊涂窗口综合症
  90. 90拥塞控制
  91. 91慢启动
  92. 92拥塞避免算法
  93. 93拥塞发生
  94. 94快速恢复
  95. 95拥塞算法示意图
  96. 96读者问答
  97. 97最后
  98. 98显形“不可见”的网络包
  99. 99解密 TCP 三次握手和四次挥手
  100. 100TCP 三次握手异常情况实战分析
  101. 101实验场景
  102. 102实验二:TCP 第二次握手 SYN、ACK 丢包
  103. 103实验三:TCP 第三次握手 ACK 丢包
  104. 104TCP 快速建立连接
  105. 105TCP 重复确认和快速重传
  106. 106TCP 流量控制
  107. 107零窗口通知与窗口探测
  108. 108发送窗口的分析
  109. 109TCP 延迟确认与 Nagle 算法
  110. 110读者问答
  111. 1113.4 TCP 半连接队列和全连接队列
  112. 112什么是 TCP 半连接队列和全连接队列?
  113. 113实战 - TCP 全连接队列溢出
  114. 114实战 - TCP 半连接队列溢出
  115. 115读者问答
  116. 116最后
  117. 1173.5 TCP 内核参数
  118. 118TCP 三次握手的性能提升
  119. 119客户端优化
  120. 120服务端优化
  121. 121如何绕过三次握手?
  122. 122小结
  123. 123TCP 四次挥手的性能提升
  124. 124主动方的优化
  125. 125被动方的优化
  126. 126小结
  127. 127TCP 传输数据的性能提升
  128. 128如何确定最大传输速度?
  129. 129小结
  130. 130读者问答
  131. 131四、IP 篇
  132. 132前菜 —— IP 基本认识
  133. 133主菜 —— IP 地址的基础知识
  134. 134IP 地址的分类
  135. 135无分类地址 CIDR
  136. 136公有 IP 地址与私有 IP 地址
  137. 137IP 地址与路由控制
  138. 138IP 分片与重组
  139. 139IPv6 基本认识
  140. 140IPv4 首部与 IPv6 首部
  141. 141点心 —— IP 协议相关技术
  142. 142ARP
  143. 143DHCP
  144. 144NAT
  145. 145ICMP
  146. 146IGMP
  147. 147读者问答
  148. 1484.2 ping 的工作原理
  149. 149IP协议的助手 —— ICMP 协议
  150. 150查询报文类型
  151. 151差错报文类型
  152. 152a. 网络不可达代码为 0
  153. 153c. 协议不可达代码为 2
  154. 154ping —— 查询报文类型的使用
  155. 155traceroute —— 差错报文类型的使用
  156. 156读者问答
  157. 157五、网络综合篇
  158. 158真实地址查询 —— DNS
  159. 159指南好帮手 —— 协议栈
  160. 160可靠传输 —— TCP
  161. 161远程定位 —— IP
  162. 162两点传输 —— MAC
  163. 163出口 —— 网卡
  164. 164出境大门 —— 路由器
  165. 165互相扒皮 —— 服务器 与 客户端
  166. 166一个数据包臭不要脸的感受
  167. 167最后
  168. 1685.2 Linux 系统是如何收发网络包的?
  169. 169Linux 网络协议栈
  170. 170Linux 接收网络包的流程
  171. 171Linux 发送网络包的流程
  172. 172总结
  173. 173六、学习心得
  174. 1746.1 计算机网络怎么学?
  175. 175入门系列
  176. 176深入学习系列
  177. 177实战系列
  178. 178最后
  179. 1796.2 操作系统怎么学?
  180. 180入门系列
  181. 181深入学习系列
  182. 182最后
  183. 183七、画图经验
  184. 184赞赏支持
  185. 185支付宝赞赏码