使用iperf3对长肥网络进行TCP测试(TCP长肥管道)，如何配置iperf3

现在的网络，通常是大带宽的，如果有中间一些设备产生的延时，则很容易产生长肥网络的问题。通过长肥网络与TCP的长肥管道一文，我们已经知道了TCP长肥管道中，TCP的性能很差，很难充分利用网络带宽，那么如果要对这样的网络进行测试，得到网络的最大吞吐量，我们应该如何正确的使用iperf3，如何正确的设置iperf3的参数呢。

1、TCP长肥管道的二大特征

首先我们来回顾一下，TCP长肥管道的二大特征：

• 传输时延（发送时延）很小
  收发包速度很快，非常短的时间就能把大量的数据发送到网络上。
• 传播时延很大
  数据包从发送到网络上开始，要给过很长的时间（相比于发送时延）才能传送到接收端

2、TCP长肥管道中TCP连接数据发送的问题

这会导致的问题：在发送端发送的第一个bit还没有到达接收端时，发送端就已经发送完了最后一个bit, 然后窗口变成0，然后停止发送数据并等待接收端通过ACK带回接收通告窗口，后才能打开窗口继续发送，导致TCP无法占满带宽去发送数据。

3、使用iperf3对TCP长肥管道中的TCP连接进行最大吞吐量测试的方法

通常，我们在一个带宽为1Gbps的网络里打流，我们就会希望TCP吞吐量的最大值能达到1Gbps，但由于上述长肥网络的原因，可能达不到1Gbps。

解决这个问题主要就是二个思路：

3.1、一条TCP连接无法占满整个带宽，那么就考虑同时使用多条TCP连接去占满带宽

• 使用-P参数

  假设因为长肥管道导致窗口不够用，进而导致一个TCP流最大可以达到100Mbps, TCP接收窗口是针对每个TCP连接单独设置的，即每个TCP连接维护自己的一个接收窗口。所以我们用-P参数，同时启动10个TCP连接，等稳定后，则可以达到最大吞吐量(带宽) 10*100Mbps = 1Gbps。
  详见：iPerf3 -P参数详细图文分析

• 使用多个iperf3进程
  原理和使用-P相同，因为每个TCP连接维护自己的一个独立的接收窗口，所以多开一些TCP连接则可。
  详见：同时启动多个iperf3进程进行大流量测试

3.2、扩大TCP窗口，以提高网络利用率

• 使用-w参数扩大TCP窗口
  详见iPerf3 -w 参数详细图文分析

  注意-w 参数的实际值受限于不同linux的实现，有些设置超过最大值会返回出错，有些设置超过最大值时，只是简单的将参数变成最大值返回成功。可以在root权限下用，用echo命令来修改系统限制的最大值。

/proc/sys/net/core/wmem_max 
/proc/sys/net/core/wmem_default
/proc/sys/net/core/rmem_max 
/proc/sys/net/core/rmem_default

echo 425984 > /proc/sys/net/core/rmem_max