如何确定最大传输速度?
在前面我们知道了 TCP 的传输速度,受制于发送窗口与接收窗口,以及网络设备传输能力。其中,窗口大小由内核缓冲区大小决定。如果缓冲区与网络传输能力匹配,那么缓冲区的利用率就达到了最大化。
问题来了,如何计算网络的传输能力呢?
相信大家都知道网络是有「带宽」限制的,带宽描述的是网络传输能力,它与内核缓冲区的计量单位不同:
带宽是单位时间内的流量,表达是「速度」,比如常见的带宽 100 MB/s;
缓冲区单位是字节,当网络速度乘以时间才能得到字节数;
这里需要说一个概念,就是带宽时延积,它决定网络中飞行报文的大小,它的计算方式:
比如最大带宽是 100 MB/s,网络时延(RTT)是 10ms 时,意味着客户端到服务端的网络一共可以存放 100MB/s
- 0.01s = 1MB 的字节。
这个 1MB 是带宽和时延的乘积,所以它就叫「带宽时延积」(缩写为 BDP,Bandwidth Delay Product)。同时,这 1MB 也表示「飞行中」的 TCP 报文大小,它们就在网络线路、路由器等网络设备上。如果飞行报文超过了
1 MB,就会导致网络过载,容易丢包。
由于发送缓冲区大小决定了发送窗口的上限,而发送窗口又决定了「已发送未确认」的飞行报文的上限。因此,发送缓冲区不能超过「带宽时延积」。
发送缓冲区与带宽时延积的关系:
如果发送缓冲区「超过」带宽时延积,超出的部分就没办法有效的网络传输,同时导致网络过载,容易丢包;
如果发送缓冲区「小于」带宽时延积,就不能很好的发挥出网络的传输效率。
所以,发送缓冲区的大小最好是往带宽时延积靠近。
怎样调整缓冲区大小?
在 Linux 中发送缓冲区和接收缓冲都是可以用参数调节的。设置完后,Linux 会根据你设置的缓冲区进行动态调节。
调节发送缓冲区范围
上面三个数字单位都是字节,它们分别表示:
第一个数值是动态范围的最小值,4096 byte = 4K;
第二个数值是初始默认值,87380 byte ≈ 86K;
第三个数值是动态范围的最大值,4194304 byte = 4096K(4M);
发送缓冲区是自行调节的,当发送方发送的数据被确认后,并且没有新的数据要发送,就会把发送缓冲区的内存释放掉。
调节接收缓冲区范围
而接收缓冲区的调整就比较复杂一些,先来看看设置接收缓冲区范围的 tcp_rmem 参数:
上面三个数字单位都是字节,它们分别表示:
第一个数值是动态范围的最小值,表示即使在内存压力下也可以保证的最小接收缓冲区大小,4096 byte = 4K;
第二个数值是初始默认值,87380 byte ≈ 86K;
第三个数值是动态范围的最大值,6291456 byte = 6144K(6M);
接收缓冲区可以根据系统空闲内存的大小来调节接收窗口:
如果系统的空闲内存很多,就可以自动把缓冲区增大一些,这样传给对方的接收窗口也会变大,因而提升发送方发送的传输数据数量;
反之,如果系统的内存很紧张,就会减少缓冲区,这虽然会降低传输效率,可以保证更多的并发连接正常工
调节 TCP 内存范围
接收缓冲区调节时,怎么知道当前内存是否紧张或充分呢?这是通过 tcp_mem 配置完成的:
上面三个数字单位不是字节,而是「页面大小」,1 页表示 4KB,它们分别表示:
当 TCP 内存小于第 1 个值时,不需要进行自动调节;
在第 1 和第 2 个值之间时,内核开始调节接收缓冲区的大小;
大于第 3 个值时,内核不再为 TCP 分配新内存,此时新连接是无法建立的;
一般情况下这些值是在系统启动时根据系统内存数量计算得到的。根据当前 tcp_mem 最大内存页面数是 177120,当内存为 (177120 * 4) / 1024K ≈ 692M 时,系统将无法为新的 TCP 连接分配内存,即 TCP 连接将被拒
绝。
根据实际场景调节的策略
在高并发服务器中,为了兼顾网速与大量的并发连接,我们应当保证缓冲区的动态调整的最大值达到带宽时延积,而最小值保持默认的 4K 不变即可。而对于内存紧张的服务而言,调低默认值是提高并发的有效手段。
同时,如果这是网络 IO 型服务器,那么,调大 tcp_mem 的上限可以让 TCP 连接使用更多的系统内存,这有利于提升并发能力。需要注意的是,tcp_wmem 和 tcp_rmem 的单位是字节,而 tcp_mem 的单位是页面大小。而且,
千万不要在 socket 上直接设置 SO_SNDBUF 或者 SO_RCVBUF,这样会关闭缓冲区的动态调整功能。
全站分卷索引 · 185 卷
- 1前言
- 2勘误事宜
- 3应用层
- 4网络层
- 5数据链路层
- 6物理层
- 7总结
- 8二、HTTP 篇
- 9HTTP 基本概念
- 10GET 与 POST
- 11HTTP 特性
- 12HTTP 与 HTTPS
- 13HTTP/1.1、HTTP/2、HTTP/3 演变
- 14读者问答
- 15最后
- 162.2 HTTP/1.1如何优化?
- 17如何减少 HTTP 请求次数?
- 18减少重定向请求次数
- 19合并请求
- 20延迟发送请求
- 21无损压缩
- 22总结
- 23最后
- 242.3 HTTPS RSA 握手解析
- 25RSA 握手过程
- 26TLS 第一次握手
- 27客户端验证证书
- 28证书链
- 29TLS 第三次握手
- 30TLS 第四次握手
- 31最后
- 322.4 HTTPS ECDHE 握手解析
- 33离散对数
- 34DH 算法
- 35DHE 算法
- 36ECDHE 算法
- 37TLS 第一次握手
- 38TLS 第三次握手
- 39TLS 第四次握手
- 40总结
- 412.5 HTTPS 如何优化?
- 42分析性能损耗
- 43硬件优化
- 44软件优化
- 45密钥交换算法优化
- 46TLS 升级
- 47证书优化
- 48OCSP
- 49OCSP Stapling
- 50会话复用
- 51Session Ticket
- 52Pre-shared Key
- 53总结
- 54最后
- 552.6 HTTP/2 牛逼在哪?
- 56HTTP/1.1 协议的性能问题
- 57头部压缩
- 58静态表编码
- 59动态表编码
- 60二进制帧
- 61并发传输
- 62服务器主动推送资源
- 63总结
- 64最后
- 65美中不足的 HTTP/2
- 66TCP 与 TLS 的握手时延迟
- 67网络迁移需要重新连接
- 68QUIC 协议的特点
- 69更快的连接建立
- 70连接迁移
- 71总结
- 72最后
- 73三、TCP 篇
- 74TCP 基本认识
- 75TCP 连接建立
- 76TCP 连接断开
- 77Socket 编程
- 78读者问答
- 79最后
- 803.2 TCP 重传、滑动窗口、流量控制、拥塞控制
- 81重传机制
- 82超时重传
- 83快速重传
- 84SACK 方法
- 85滑动窗口
- 86流量控制
- 87操作系统缓冲区与滑动窗口的关系
- 88窗口关闭
- 89糊涂窗口综合症
- 90拥塞控制
- 91慢启动
- 92拥塞避免算法
- 93拥塞发生
- 94快速恢复
- 95拥塞算法示意图
- 96读者问答
- 97最后
- 98显形“不可见”的网络包
- 99解密 TCP 三次握手和四次挥手
- 100TCP 三次握手异常情况实战分析
- 101实验场景
- 102实验二:TCP 第二次握手 SYN、ACK 丢包
- 103实验三:TCP 第三次握手 ACK 丢包
- 104TCP 快速建立连接
- 105TCP 重复确认和快速重传
- 106TCP 流量控制
- 107零窗口通知与窗口探测
- 108发送窗口的分析
- 109TCP 延迟确认与 Nagle 算法
- 110读者问答
- 1113.4 TCP 半连接队列和全连接队列
- 112什么是 TCP 半连接队列和全连接队列?
- 113实战 - TCP 全连接队列溢出
- 114实战 - TCP 半连接队列溢出
- 115读者问答
- 116最后
- 1173.5 TCP 内核参数
- 118TCP 三次握手的性能提升
- 119客户端优化
- 120服务端优化
- 121如何绕过三次握手?
- 122小结
- 123TCP 四次挥手的性能提升
- 124主动方的优化
- 125被动方的优化
- 126小结
- 127TCP 传输数据的性能提升
- 128如何确定最大传输速度?
- 129小结
- 130读者问答
- 131四、IP 篇
- 132前菜 —— IP 基本认识
- 133主菜 —— IP 地址的基础知识
- 134IP 地址的分类
- 135无分类地址 CIDR
- 136公有 IP 地址与私有 IP 地址
- 137IP 地址与路由控制
- 138IP 分片与重组
- 139IPv6 基本认识
- 140IPv4 首部与 IPv6 首部
- 141点心 —— IP 协议相关技术
- 142ARP
- 143DHCP
- 144NAT
- 145ICMP
- 146IGMP
- 147读者问答
- 1484.2 ping 的工作原理
- 149IP协议的助手 —— ICMP 协议
- 150查询报文类型
- 151差错报文类型
- 152a. 网络不可达代码为 0
- 153c. 协议不可达代码为 2
- 154ping —— 查询报文类型的使用
- 155traceroute —— 差错报文类型的使用
- 156读者问答
- 157五、网络综合篇
- 158真实地址查询 —— DNS
- 159指南好帮手 —— 协议栈
- 160可靠传输 —— TCP
- 161远程定位 —— IP
- 162两点传输 —— MAC
- 163出口 —— 网卡
- 164出境大门 —— 路由器
- 165互相扒皮 —— 服务器 与 客户端
- 166一个数据包臭不要脸的感受
- 167最后
- 1685.2 Linux 系统是如何收发网络包的?
- 169Linux 网络协议栈
- 170Linux 接收网络包的流程
- 171Linux 发送网络包的流程
- 172总结
- 173六、学习心得
- 1746.1 计算机网络怎么学?
- 175入门系列
- 176深入学习系列
- 177实战系列
- 178最后
- 1796.2 操作系统怎么学?
- 180入门系列
- 181深入学习系列
- 182最后
- 183七、画图经验
- 184赞赏支持
- 185支付宝赞赏码