ovs-dpdk和ovs-kernel的checksum处理

最新推荐文章于 2025-06-05 09:10:45 发布
最新推荐文章于 2025-06-05 09:10:45 发布
阅读量2.4k 收藏 2
点赞数
CC 4.0 BY-SA版权
分类专栏： OVS-DPDK 文章标签： ovs dpdk csum checksum offload
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/hliyuxin/article/details/52713273
在将部分docker迁移至ovs-dpdk时出现TCP checksum错误，关闭docker网卡的TX checksum后问题解决。ovs-kernel中，docker网卡的TX checksumming开启，物理网卡关闭时服务正常。ovs-dpdk不支持物理网卡的checksum硬件计算，导致VM数据包由自身协议栈计算L4 checksum。解决方案包括统一关闭虚拟port的TX checksumming或修改ovs-dpdk代码以支持硬件CSUM功能。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

转载请注明出处： http://blog.youkuaiyun.com/hliyuxin/article/details/52710749

  • 现在遇到问题，部分docker的机器，迁移到ovs-dpdk上之后有tcp checksum错误, ethtool关闭docker 网卡tx checksum之后，服务正常。

  • 查看原ovs-kernel的配置，docker 网卡tx-checksumming: on, 而物理网卡tx-checksumming: off。服务正常，没有tcp checksum error。

    1. ovs-dpdk现不支持物理网卡的 checksum硬件计算功能，VM发出的数据包，默认由VM的协议栈计算L4 checksum。VM不能打开tx-checksumming on功能，这是因为vhost-backend和qemu协商时，不支持HOST的VIRTIO_NET_F_CSUM功能，ovs-dpdk也没有对mbuf特殊的处理。
    2. kernel 版本ovs 的packet checksum处理是，skb的处理是在内核态，最终从物理port发出是通过netdev_send函数，调用了内核dev_queue_xmit函数， dev_queue_xmit是内核自带的函数。继续查看kernel源码，dev_queue_xmit调用了validate_xmit_skb函数，会对skb的checksum的有效性进行检查。如果packet的接收port打开了tx checksum功能，使checksum没有完整计算，但是packet需要send的port又不支持硬件checksum功能时，会对tx checksum进行补充计算。validate_xmit_skb:
 /* If packet
最低0.47元/天 解锁文章

200万优质内容无限畅学
【C语言】linux内核dev_queue_xmit
数字人生
03-06 1503
注意的是，`__dev_queue_xmit`函数可以在中断上下文中调用，并且即使发送操作报告成功，也无法保证数据包一定会被传输出去，因为可能会因为网络拥堵或流量整形策略被丢弃。一旦调用该函数发送数据包，数据包的内存就被消费了，即使发送失败也不会尝试重传。这两个函数涉及到Linux内核网络发送路径的处理细节，包括选择设备队列、处理网络设备的发送锁、检查设备队列是否被停止、调用真正的发送函数、错误处理和资源清理等。它只需要一个参数，即要发送的数据包`skb`，因为它默认不需要处理从属设备`sb_dev`。
OVS简介
weixin_60043341的博客
08-10 7346
每个数据路径也通过关联一下流表（flow table）来设置操作，而这些流表中的流都是用户空间在报文头和元数据的基础上映射的关键信息，一般的操作都是将数据包转发到另一个vport。：利用软件的方式形成交换部件，所以也叫软件交换机，跟传统的物理交换机相比，虚拟交换机要具备很多优点：1.配置灵活，因为是软件实现的，一台物理服务器上可以配置数十台或者数百台虚拟交换机，而且端口数目可以灵活选择 2. 成本低廉，通过软件的方式可轻易达到10Gbps的交换速度。有了全局的概念后，我们来详细了解OVS的内部组件。...
ovs+dpdk场景下的tx checksum offload
zheng的博客
03-13 3131
一、checksum： tcp checksum包括三部分： 1）、伪头部校验和； 伪头部包括: 源ip 、宿ip、 协议号、tcp 长度，主要用于校验是正确的目的机器接收到数据包 2）、tcp头部校验和； 3）、数据部分校验和； 当硬件有checksum offload能力时，可以通过ethtook -K tx on/off设置是否将checksum offload到硬件处理； 如果将c...
OVS + kernel datapath 的安装
weixin_30342209的博客
06-05 276
***kernel datapath的OVS编译安装 下载源代码 $ git clone https://github.com/openvswitch/ovs.git 准备工具：生成configure文件 GNU make $ make --version 一个C语言编译器，GCC 4.6以上，Clang 3.4以上 $ gcc --version libssl $...
软件OVS（Open vSwitch）
最新发布
m0_60872027的博客
06-05 698
软件OVS（Open vSwitch）是一种面向虚拟化环境的开源虚拟交换机，具有高性能、灵活性和可扩展性，在云计算、数据中心和网络功能虚拟化（NFV）等场景中发挥着重要作用。
DPDK - TX-Offload Checksum
热门推荐
奋斗中拥有
10-10 3万+
DPDK rte_mbuf 启用网卡 Offload 计算校验和配置方法计算 IP checksummb->l2_len = len(out_eth) mb->l3_len = len(out_ip) mb->ol_flags |= PKT_TX_IPV4 | PKT_TX_IP_CSUM注: out_ip.checksum = 0 网卡支持 DEV_TX_OFFLOAD_IPV4_CKSUM
DPDK环境搭建报错及解决方法总结
li727507857的博客
10-15 4652
学习dpdk的第一道坎就是dpdk环境的安装。根据我安装了dpdk数十次，遇到过各种各样的问题，也积累了不少经验，现在总结在这篇博文里。 1.错误：提供给函数‘ndo_dflt_bridge_getlink’的实参太少 上网搜索解决方案： 在dpdk文件夹/x86_64-native-linuxapp-gcc/下编辑.config文件 将： #CO...
OVS 和 OVS-DPDK 对比
weixin_60043341的博客
11-17 1265
OVS 目前有两种比较突出的架构，一种是原生的 OVS 架构（使用 kernel 作为 datapath），一种是基于 DPDK 的架构（使用用户空间作为 datapath）。
ovs dpdk debug
lingshengxiyou的博客
11-15 1311
ovs的action类型如下，使用nla_type()函数获取nl_type的值，入口处理函数为do_execute_actions()。,#endif};OVS_ACTION_ATTR_OUTPUT：获取port号，调用do_output()发送报文到该port；OVS_ACTION_ATTR_USERSPACE：调用output_userspace()发送到用户态；
OVS——大杂烩
weixin_30337251的博客
06-11 1498
其他资料 http://docs.openvswitch.org/en/latest/tutorials/ovs-conntrack/ OVS架构解析--dpdk datapath数据通路 1.架构说明 1.1. 整体架构 OVS(openvswitch)是开源的虚拟交换机。也是当前市场上云环境中部署份额最大的交换机。支持 op...
DPDK-A1:Centos配置MLX5驱动
lingshengxiyou的博客
11-19 1552
需要注意的是安装了ofed驱动和支持mlx5_pmd的网卡不需要bind，直接就可以使用，我们还是使用上次的框架，稍微改改收发包程序，来测一下pps。和ubuntu一类的系统不同，CentOS上需要添加/usr/local路径, 主要是。在安装的时候请您勾选一下组件, 虚拟化的东西是后面在虚拟机里面跑DPDK需要用到的.主要是用于后面安装mlx5 ofed和编译DPDK所需的工具，注意下面的一个都不能少。更多DPDK相关学习资料有需要的可以自行报名学习,免费订阅,永久学习,或点击这里加。
dpdk PMD
lingshengxiyou的博客
11-15 798
PMD是Poll Mode Driver的缩写，即基于用户态的轮询机制的驱动在不考虑vfio的情况下，PMD的结构图如下虽然PMD是在用户态实现设备驱动，但还是依赖于内核提供的策略。其中uio模块，是内核提供的用户态驱动框架，而igb_uio是DPDK kit中拥有与uio交互，bind指定网卡的内核模块;当使用DPDK脚本dpdk-devbind来bind网卡时，会通过sysfs与内核交互，让内核使用指定驱动来匹配网卡。
OVS源码结构分析
造梦先森Kai的专栏
07-09 3855
1. OVS内部结构分析 下图是OVS（Open vSwitch）系统层面的逻辑图。 其中datapath是处于系统的核心层（kernel space），我们可以将datapath理解为一个网桥（linux bridge）。处于用户态（user space）的主要是openvswitch client、openflow client、ofproto library、netdev等等。 如...
swarm节点间通信问题-关闭checksum校验和
God丶Davide的博客
01-11 8254
客户有n台redhat虚拟机，构建了一个swarm集群，服务起来后，发现不同节点间的服务，无法互相访问。经运维大佬排查是服务器的checksum校验是开启状态，关闭即可~
DPDK疑难杂症之发包Tx失败
legend050709的专栏
03-22 3990
目录现象原因具体原因解决参考 现象 DPDK场景下网卡批量发包失败（计划发送N个，实际只能发送M个）。 用GDB跟进去的话会发现是网卡发送队列的DD标志位未置位。 原因 DPDK 程序通过 ixgbe或者i40e pmd 驱动可以直接操作网卡的寄存器和 ring Buffer，当上层业务存在问题，发送一些“不合规”的数据包时，这些有问题的数据包会直接进入网卡，引发硬件问题。 在内核态时，这些有问题的数据包会被内核驱动检查过滤掉。 但是DPDK程序的检查是自己控制的，无法做到精准检查。 具体原因 引发发送
Linux 内核协议栈的 TSO、GSO
榕易的易
08-13 2320
Linux 内核的 TSO 会在真正将skb发送到网卡前做GSO的检查： 对于真实硬件设备，是在sch_direct_xmit中调用validate_xmit_skb_list检查 对于虚拟设备，则是在__dev_queue_xmit中调用validate_xmit_skb检查 static int __dev_queue_xmit(struct sk_buff *skb, void *ac...
链路层的输出
weixin_30379973的博客
05-11 358
网络层发包 将通过dev_queue_xmit 将数据包发送到 输出设备层中， 调用dev_queue_xmit 函数输出数据包，前提是必须启用中断，只有启用中断之后才能激活下半部。 1.设备在调用这个函数之前，必须设置设备优先级 和缓冲区buffer 2.如果此函数发送失败，会返回一个负数的Error number，不过即使返回正数，也不一定保证发送成功，封包也许会被网络拥塞给d...
【问题解决】Mellanox驱动加载报错Unknown symbol psample_sample_packet和tls_get_record以及tls_validate_xmit_skb的解决过程
技术札记
05-01 455
然后搜索：find / -name “*.ko” |grep -i act。咱们没办法，可能需要5.10的内核支持。
优化OVS-DPDK：负载均衡与性能调优案例
OVS-DPDK（Open vSwitch with Data Plane Development Kit）是一种高度优化的虚拟网络转发引擎，它利用硬件加速技术来提升网络数据包处理的性能。"Every cycle counts" 这个标题强调了在设计和优化OVS-DPDK时对每一...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值