增强型数据路径 (EDP) 是一种网络堆栈模式,配置后可提供卓越的网络性能。它主要针对 NFV 工作负载,这些工作负载可利用 DPDK 功能提供性能优势。

只能在 ESXi 主机上以增强型数据路径模式配置 VDS 交换机。增强型数据路径还支持流经 Edge 虚拟机的流量。

在增强型数据路径模式下,同时支持以下两种流量模式:

  • 覆盖网络流量
  • VLAN 流量

受支持的 VMkernel 网卡

对于支持多个增强型数据路径主机交换机的 NSX,每个主机支持的 VMkernel 网卡最大数为 32。

配置增强型数据路径的高级过程

作为网络管理员,创建支持增强型数据路径模式 VDS 的传输区域之前,必须使用支持的网卡和驱动程序准备网络。要提高网络性能,可以使负载均衡源绑定策略成为 NUMA 节点感知的绑定策略。

概要步骤如下所示:

  1. 使用支持增强型数据路径的网卡。

    请参见《VMware 兼容性指南》,了解支持增强型数据路径的网卡。

  2. 在“VMware 兼容性指南”页面上,从系统/服务器下拉菜单中选择 IO 设备
  3. IO 设备页面上的产品发行版本部分中,选择 ESXi <version>
  4. IO 设备类型 部分中,选择网络
  5. 功能部分中,增强型数据路径 - 中断模式增强型数据路径 - 轮询模式
  6. 单击更新并查看结果
  7. 在搜索结果中,您将找到与所选 ESXi 版本兼容的受支持网卡。
  8. 确定要为其下载驱动程序的品牌,然后单击型号 URL 以查看和下载驱动程序。
  9. Broadcom 支持页面中下载并安装最新的网卡驱动程序。
    1. 选择 VMware vSphere 版本。
    2. 转至驱动程序和工具 > 驱动程序 CD
    3. 下载网卡驱动程序。
    4. 要将该主机用作增强型数据路径主机,系统上必须至少有一个支持增强型数据路径的网卡。如果没有支持增强型数据路径的网卡,则管理平面不允许将主机添加到增强型数据路径传输区域。
    5. 列出增强型数据路径驱动程序。

      esxcli software vib list | grep -E "i40|ixgben"

    6. 验证网卡能否处理增强型数据路径流量。
      esxcfg-nics -e
      Name    Driver   ENS Capable   ENS Driven    MAC Address       Description                   
      vmnic0  ixgben   True          False         e4:43:4b:7b:d2:e0 Intel(R) Ethernet Controller X550
      vmnic1  ixgben   True          False         e4:43:4b:7b:d2:e1 Intel(R) Ethernet Controller X550
      vmnic2  ixgben   True          False         e4:43:4b:7b:d2:e2 Intel(R) Ethernet Controller X550
      vmnic3  ixgben   True          False         e4:43:4b:7b:d2:e3 Intel(R) Ethernet Controller X550
      vmnic4  i40en    True          False         3c:fd:fe:7c:47:40 Intel(R) Ethernet Controller X710/X557-AT 10GBASE-T
      vmnic5  i40en    True          False         3c:fd:fe:7c:47:41 Intel(R) Ethernet Controller X710/X557-AT 10GBASE-T
      vmnic6  i40en    True          False         3c:fd:fe:7c:47:42 Intel(R) Ethernet Controller X710/X557-AT 10GBASE-T
      vmnic7  i40en    True          False         3c:fd:fe:7c:47:43 Intel(R) Ethernet Controller X710/X557-AT 10GBASE-T
    7. 安装增强型数据路径驱动程序。

      esxcli software vib install -v file:///<DriverInstallerURL> --no-sig-check

    8. 也可以将该驱动程序下载到系统并进行安装。

      wget <DriverInstallerURL>

      esxcli software vib install -v file:///<DriverInstallerURL> --no-sig-check

    9. 重新引导主机以加载该驱动程序。继续执行下一步。
    10. 要卸载该驱动程序,请执行以下步骤:

      vmkload_mod -u i40en

      ps | grep vmkdevmgr

      kill -HUP "$(ps | grep vmkdevmgr | awk {'print $1'})"

      ps | grep vmkdevmgr

      kill -HUP <vmkdevmgrProcessID>

      kill -HUP "$(ps | grep vmkdevmgr | awk {'print $1'})"

    11. 要卸载增强型数据路径驱动程序,请执行以下命令:esxcli software vib remove --vibname=i40en-ens --force --no-live-install
      注: 为覆盖网络流量配置的增强型数据路径传输区域:对于运行低于 11.0.0 的 VMware Tools 版本的 Microsoft Windows 虚拟机,如果 vNIC 类型为 VMXNET3,请确保将 MTU 设置为 1500。对于运行 vSphere 6.7 U1 和 VMware Tools 11.0.0 和更高版本的 Microsoft Windows 虚拟机,请确保将 MTU 设置为小于 8900 的值。对于运行其他受支持操作系统的虚拟机,请确保将虚拟机 MTU 设置为小于 8900 的值。
  10. 创建主机传输节点。在具有逻辑内核和 NUMA 节点的 VDS 交换机上的“增强型数据路径”中配置模式。

负载均衡源绑定策略模式感知 NUMA

满足以下条件时,为增强型数据路径 VDS 定义的负载均衡源绑定策略模式会感知 NUMA:
  • 虚拟机上的延迟敏感度

  • 使用的网络适配器类型为 VMXNET3。

如果虚拟机或物理网卡的 NUMA 节点位置不可用,则负载均衡源绑定策略不考虑 NUMA 感知性以与虚拟机和网卡一致。

在以下情况下,绑定策略运行时不感知 NUMA:
  • LAG 上行链路配置有多个 NUMA 节点的物理链路。
  • 虚拟机具有与多个 NUMA 节点的关联性。
  • ESXi 主机无法定义虚拟机或物理链路的 NUMA 信息。

对需要流量可靠性的应用程序的增强型数据路径支持

NFV 工作负载可使用由流控制传输协议 (Stream Control Transmission Protocol, SCTP) 提供的多宿主和冗余功能来提高应用程序上运行的流量的弹性和可靠性。多宿主是支持从源虚拟机到目标虚拟机的冗余路径的功能。

根据要用作覆盖网络或 VLAN 网络的上行链路的可用物理网卡数,虚拟机可使用多个冗余网络路径来向目标虚拟机发送流量。固定到逻辑交换机的 pNIC 出现故障时,会使用冗余路径。增强型数据路径交换机可在主机之间提供冗余网络路径。

图 1. 通过增强型数据路径的流量的多宿主和冗余功能

逻辑交换机上覆盖网络流量的多宿主和冗余功能。

高级任务如下:

  1. 将主机准备为 NSX 传输节点。
  2. 在增强型数据路径模式下,准备具有两个 VDS 交换机的 VLAN 或覆盖网络传输区域。
  3. 在 VDS 1 上,将第一个物理网卡固定到交换机。
  4. 在 VDS 2 上,将第二个物理网卡固定到交换机。

处于增强型数据路径模式的 VDS 可确保,当 pNIC1 变得不可用时,将通过以下冗余路径来路由来自虚拟机 1 的流量:vNIC 1 → 隧道端点 2 → pNIC 2 → 虚拟机 2。