使用 ENA Express 提高 EC2 实例之间的网络性能

ENA Express 的优势

• 将可用区内的单个流可以使用的最大带宽从 5 Gbps 增大到 25 Gbps，最大不超过实例的总计限制。

• 减少 EC2 实例之间网络流量的尾部延迟，尤其是在网络高负载期间。

• 检测并避开拥塞的网络路径。

• 直接在网络层处理某些任务，比如接收端的数据包重新排序以及所需的大部分重传。这样可以腾出应用层用于其他工作。

• 同一个可用区内的最大单个流带宽从 5Gbps 提升到 25Gbps，最大不超过实例的总计限制，进程可以从中受益。例如，如果一种特定的实例类型支持最大 12.5Gbps 的贷款，单个流的带宽上限也将是 12.5Gbps。

• 在网络拥塞时段，运行时间较长的进程会减少尾部延迟。

• 网络响应时间分配更流畅、更标准时，进程可以从中受益。

• 同时支持发送和接收实例类型。有关更多信息，请参阅 ENA Express 支持的实例类型 表。

• 发送和接收实例都必须配置 ENA Express。如配置存在差异，则可能会遇到流量默认为标准 ENA 传输的情况。以下方案显示了可能发生的情况。

  方案：配置差异

  实例	已启用 ENA Express	UDP 使用 ENA Express
  实例 1	是	是
  实例 2	是	否

  在这种情况下，两个实例之间的 TCP 流量可以使用 ENA Express，因为两个实例均已启用该功能。但是，由于其中一个实例不将 ENA Express 用于 UDP 流量，因此这两个实例之间通过 UDP 进行的通信则使用标准 ENA 传输。

• 发送和接收实例必须在同一可用区中运行。

• 实例之间的网络路径不得包含中间件。ENA Express 目前不支持中间件。

• （仅限 Linux 实例）要充分利用带宽潜力，请使用驱动程序版本 2.2.9 或更高版本。

• （仅限 Linux 实例）要生成指标，请使用驱动程序版本 2.8 或更高版本。

• 如果您的实例使用巨型帧，请运行以下命令，以将最大传输单元（MTU）设置为 8900。

  [ec2-user ~]$ sudo ip link set dev eth0 mtu 8900

• 增加接收器（Rx）环的大小，如下所示：

  [ec2-user ~]$ ethtool -G device rx 8192

• 要最大化 ENA Express 带宽，请按如下方式配置您的 TCP 队列限制：

  1. 将 TCP 小队列限制设置为 1MB 或更大值。这会增加在套接字上排队等待传输的数据量：

     sudo sh -c 'echo 1048576 > /proc/sys/net/ipv4/tcp_limit_output_bytes'

  2. 如果您的 Linux 发行版启用了字节队列限制，请禁用 eth 设备上的字节队列限制。这也会增加设备队列排队等待传输的数据。

     sudo sh -c 'for txq in /sys/class/net/eth0/queues/tx-*; do echo max > ${txq}/byte_queue_limits/limit_min; done'

     注意

     默认情况下，Amazon Linux 发行版的 ENA 驱动程序会禁用字节队列限制。