如何解决DEV_TX_OFFLOAD_VXLAN_TNL_TSO 卸载测试 - DPDK
我正在研究 Mellanox ConnectX-5 卡,并在 CentOS 8 (4.18.0-147.5.1.el8_1.x86_64) 上使用 DPDK 20.11。
我想测试 DEV_TX_OFFLOAD_VXLAN_TNL_TSO 卸载,我想问的是我应该发送到 DPDK 应用程序的数据包结构应该是什么样的(我正在使用 scapy),以便此卸载将起作用并执行分段(因为它是 VXLAN_TNL_TSO)。
我正在修改 dpdk-ip_fragmentation 示例并在 port_conf 中添加了:DEV_TX_OFFLOAD_IP_TNL_TSO
static struct rte_eth_conf port_conf = {
.rxmode = {
.max_rx_pkt_len = JUMBO_FRAME_MAX_SIZE,.split_hdr_size = 0,.offloads = (DEV_RX_OFFLOAD_CHECKSUM |
DEV_RX_OFFLOAD_SCATTER |
DEV_RX_OFFLOAD_JUMBO_FRAME),},.txmode = {
.mq_mode = ETH_MQ_TX_NONE,.offloads = (DEV_TX_OFFLOAD_IPV4_CKSUM |
DEV_TX_OFFLOAD_VXLAN_TNL_TSO
),};
在 ol_flags 处:
ol_flags |= (PKT_TX_IPV4 | PKT_TX_IP_CKSUM | PKT_TX_TUNNEL_VXLAN );
简而言之,要测试此卸载,如果有人能帮我做两件事,那就太好了:
- 我应该发送的数据包结构应该是什么(使用 scapy,以便卸载生效)?
- 在 DPDK 示例应用程序中需要进行的设置(没有必要使用 ip_fragmentation 示例,任何其他示例也可以)。
解决方法
注意:基于 3 小时的调试会话,已澄清 title
和 question
共享是不正确的。因此,问题将被重新编辑以反映实际需求为how enable DPDK port with TCP-TSO offloads for tunnelled VXLAN packets
。
第一个问题的答案将数据包发送到 DPDK DUT 以用于 TSO 并接收分段流量的 scapy 设置应该是什么是
- 使用
ethtool -K [scapy interface] rx off tx off tso off gso off gro off lro off
在 SCAPY 接口上禁用所有与 TSO 相关的卸载 - 设置 MTU 以发送更大的帧,例如
9000
- 确保将大帧作为有效负载发送,但
less than interface MTU
。 - 为入口流量运行 tcpdump,方向标志为
tcpdump -eni [scapy interface] -Q in
第二个问题的答案DPDK示例应用中需要做的设置如下
- dpdk
testpmd
应用程序可以基于 NIC 支持启用硬件和软件 TSO 卸载。 - 下一个最佳应用是
tep_termination
,但需要 vhost 接口 (VM) 或 DPDK vhost 才能实现相同的效果。 - 由于该要求针对任何通用应用程序,例如 skeleton、l2fwd,因此可以按如下方式启用
- 确保使用 DPDK 20.11 LTS(以获得对 TUNNEL TSO 的最新和最佳支持)
- 在应用程序中使用
tx_offload
API 检查dev_get_info
功能。 - 交叉检查隧道 (VXLAN) 数据包的 HW TSO。
- 如果 TSO 需要为 UDP 有效负载完成,请检查硬件中是否支持 UDP_TSO。
- 将 NIC 配置为无多段、巨型帧、最大帧长度 > 9000 字节。
- 通过
rx_burst
接收数据包,并确保数据包是 ipv4、UDP、VXLAN(隧道),其中nb_segs
为 1。 - 修改 mbuf 以指向 l2_len、l3_len、l4_len。
- 将数据包
ol_flags
标记为PKT_TX_IPV4 | PKT_TX_TUNNEL_VXLAN | PKT_TX_TUNNEL_IP
。对于 UDP 内部负载PKT_TX_TUNNEL_UDP
。 - 然后将段大小设置为
DPDK MTU (1500 as default) - l3_len - l4_len
这将使支持 HW TSO 卸载的 PMD 能够更新描述符中的适当字段,以将给定的有效载荷作为多个数据包传输。对于我们的测试用例,9000 字节的 scapy 发送数据包将被转换为 7 * 1500 字节的数据包。这可以作为 tcpdump 的一部分进行观察。
注意:
- 参考代码存在于
tep_termination
和test_pmd
中。 - 如果没有硬件卸载,则 rte gso 的软件库可用。
- 对于硬件卸载,截至今天,所有 PMD 都要求 MBUF 是一个连续的单个非外部缓冲区。因此,请确保创建足够大的 mbufpool 或 mempool 以接收大数据包。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。