DEV_TX_OFFLOAD_VXLAN_TNL_TSO 卸载测试 - DPDK

DEV_TX_OFFLOAD_VXLAN_TNL_TSO Offload Testing - DPDK

我正在使用 Mellanox ConnectX-5 卡并使用 DPDK 20.11 和 CentOS 8 (4.18.0-147.5.1.el8_1.x86_64).

我想测试 DEV_TX_OFFLOAD_VXLAN_TNL_TSO 卸载,我想问的是数据包结构应该是什么样的(我正在使用 scapy)我应该发送到 DPDK 应用程序,以便此卸载将起作用并执行分段(因为它是 VXLAN_TNL_TSO)。

我正在修改 dpdk-ip_fragmentation 示例并在 port_conf

中添加了:DEV_TX_OFFLOAD_IP_TNL_TSO
static struct rte_eth_conf port_conf = {
    .rxmode = {
        .max_rx_pkt_len = JUMBO_FRAME_MAX_SIZE,
        .split_hdr_size = 0,
        .offloads = (DEV_RX_OFFLOAD_CHECKSUM |
                 DEV_RX_OFFLOAD_SCATTER |
                 DEV_RX_OFFLOAD_JUMBO_FRAME),
    },
    .txmode = {
        .mq_mode = ETH_MQ_TX_NONE,
        .offloads = (DEV_TX_OFFLOAD_IPV4_CKSUM | 
                 DEV_TX_OFFLOAD_VXLAN_TNL_TSO
                 ),
    },
};

在 ol_flags:

ol_flags |= (PKT_TX_IPV4 | PKT_TX_IP_CKSUM | PKT_TX_TUNNEL_VXLAN );

简而言之,要测试这个卸载,如果有人能帮我做两件事就太好了:

  1. 我应该发送什么数据包结构(使用 scapy,以便卸载生效)?
  2. 在 DPDK 示例应用程序中需要做的设置(不需要使用 ip_fragmentation 示例,任何其他示例也可以)。

注意:根据 3 小时的调试会话,已澄清 titlequestion 共享不正确。因此 问题将被重新编辑以反映实际需求 how enable DPDK port with TCP-TSO offloads for tunnelled VXLAN packets

第一个问题的答案将数据包发送到 DPDK DUT 以进行 TSO 并接收分段流量的 scapy 设置应该是什么

  1. 使用 ethtool -K [scapy interface] rx off tx off tso off gso off gro off lro off
  2. 在 SCAPY 界面上禁用所有与 TSO 相关的卸载
  3. 设置 MTU 以发送更大的帧,例如 9000
  4. 确保将大帧作为负载发送,但 less than interface MTU
  5. 运行 入口流量的 tcpdump,方向标志为 tcpdump -eni [scapy interface] -Q in

第二个问题的答案DPDK示例应用中需要做的设置如下

  1. dpdk testpmd 应用程序可以根据 NIC 支持启用硬件和软件 TSO 卸载。
  2. 下一个最佳应用程序是 tep_termination,但需要 vhost 接口 (VM) 或 DPDK vhost 才能实现相同的目的。
  3. 由于该要求针对任何通用应用程序,如 skeleton、l2fwd,可以按如下方式启用

  • 确保使用 DPDK 20.11 LTS(以获得对 TUNNEL TSO 的最新和最佳支持)
  • 在应用程序中使用 dev_get_info API 检查 tx_offload 功能。
  • 交叉检查隧道 (VXLAN) 数据包的 HW TSO。
  • 如果 TSO 需要为 UDP 负载完成,请检查硬件中的 UDP_TSO 支持。
  • 将 NIC 配置为无多段、巨型帧、最大帧长度 > 9000 字节。
  • 通过rx_burst接收数据包,确保数据包是ipv4、UDP、VXLAN(隧道),nb_segs为1。
  • 修改mbuf指向l2_len,l3_len,l4_len.
  • 将数据包 ol_flags 标记为 PKT_TX_IPV4 | PKT_TX_TUNNEL_VXLAN | PKT_TX_TUNNEL_IP。对于 UDP 内部负载 PKT_TX_TUNNEL_UDP.
  • 然后将段大小设置为DPDK MTU (1500 as default) - l3_len - l4_len

这将使支持 HW TSO 卸载的 PMD 能够更新描述符中的适当字段,以便将给定的有效负载作为多个数据包传输。对于我们的测试用例,scapy 发送 9000 字节的数据包将被转换为 7 * 1500 字节的数据包。这可以作为 tcpdump 的一部分进行观察。

注:

  1. 参考代码存在于 tep_terminationtest_pmd 中。
  2. 如果没有硬件卸载,rte gso的软件库可用。
  3. 对于 HW 卸载所有 PMD,截至目前要求 MBUF 是连续的单个非外部缓冲区。因此,请确保创建大小足以接收大数据包的 mbufpool 或 mempool。