LWN:可由BPF编程的网络设备!

Linux内核源码目录结构解析:从宏观布局到高效阅读指南 操作系统内核是计算机系统的核心,负责管理硬件资源并为应用程序提供基础服务。其设计遵循模块化与层次化原则,通过清晰的接口定义实现各子系统间的解耦与协作,从而提升系统的可维护性与可扩展性。这一设计理念在工程实践中的直接体现,便是其源码的目录组织结构。理解内核源码目录,如同掌握一张精密的地图,能帮助开发者在进行驱动开发、性能调优或问题排查时,快速定位目标代码,厘清模块间的依赖与调用关系。本文将以Linux内核为例,深入剖析其源码树的宏观布局与设计哲学,并重点解读 arch(架构相关代码)、drivers(设备驱动 阅读详情

关注了就能看到更多这么棒的文章哦~

The BPF-programmable network device

By Jonathan Corbet
November 6, 2023
ChatGPT translation
https://lwn.net/Articles/949960/

在 Linux 上,容器和虚拟机是通过虚拟网络设备与世界通信。这样就使得其可以利用 Linux 网络协议栈的全部功能了,但也引入了 network stack 的全部开销。通常,这些网络流量的路由可以通过相对简单的逻辑处理;BPF 可编程网络设备在 6.7 内核发布中合并,使得至少在某些情况下可以避免网络处理出现太大的开销。

在当前系统中,当客户端(容器或虚拟机)通过网络发送数据时,该数据首先进入该客户(guest)端的网络协议栈,在这里会将其生成为数据包,并通过虚拟接口发送出去。在主机(host)端,该数据包再次在网络协议栈内接收和处理。如果数据包的目的地是主机外的网络节点,则该数据包将被路由到(真实的)网络接口进行重传(retransmission)。客户端的数据就进入真实网络世界了,但这是在经过两个网络协议栈的处理之后才实现的。

新的网络设备名为"netkit",希望能简化部分开销。从某种意义上说,它是一种典型的虚拟设备,即从一端传输的数据包在被另一端接收之前仅经过主机系统的内存。这里的主要差异是在传输的工作方式上。每个网络接口驱动程序都提供了一个包含大量函数指针的net_device_ops 结构 - 在 6.6 内核中多达 90 个。其中的一个函数是 ndo_start_xmit():

netdev_tx_t (*ndo_start_xmit)(struct sk_buff *skb, struct net_device *dev);

此函数的作用就是通过指定的设备 dev 来发起对 skb 中的数据包进行传输。通常在虚拟设备中,此函数将立即通过调用类似netif_rx() 的函数将数据包“接收”到对端的网络协议栈中。然而,netkit 设备的行为略有不同。

当配置好了这个虚拟接口时,就可以将一个或多个 BPF 程序加载到接口的两侧。由于 netkit BPF 程序可以影响主机端的流量的路由动作,因此只允许主机为主机或客户端加载这些程序。由 netkit 提供的 ndo_start_xmit() 回调函数不会仅仅将数据包传递回网络协议栈,而是按顺序调用每个附加上来的 BPF 程序,将数据包传递给每一个程序。BPF 程序能够修改数据包(例如更改目标设备),并且期望返回值可以指示接下来应该执行什么操作:

  • NETKIT_NEXT: 继续处理这个系列中的下一个 BPF 程序(如果有的话)。如果没有更多程序要调用,则此返回将被视为 NETKIT_PASS 。

  • NETKIT_PASS: 立即将数据包传递到接收方的网络协议栈,而不调用任何其他 BPF 程序。

  • NETKIT_DROP: 立即丢弃数据包。

  • NETKIT_REDIRECT: 立即将数据包重定向到新的网络设备,将其放到队列中从而可以进行传输,而无需经过主机的网络协议栈。

每个接口可以配置默认策略( NETKIT_PASS 或 NETKIT_DROP ),如果没有加载 BPF 程序进行决策,则将其应用。大多数情况下,正确的策略可能是丢弃数据包,确保在完全配置接口来处理数据包之前不会有网络数据泄漏出去。

如果尽早做出丢弃数据包的决定,就可以获得性能提升。通常会有大量没有价值的网络数据流入,因此花在上面的时间越少越好。但正如更改日志所述,最大的性能提升可能来自于在不重新进入网络协议栈的情况下就对数据包数据包进行了重定向(redirect):

例如,如果 BPF 程序确定必须将 skb 发送出节点,则可以直接对物理设备进行重定向,而无需经过每个 CPU 的积压队列。这有助于将此类流量的处理从 softirq 转移到进程上下文,从而改善调度决策/性能。

根据 2023 年 Linux 存储、文件系统、内存管理和 BPF 峰会演讲幻灯片显示,通过 netkit 设备(当时称为"meta")运行的客户端能够获得与直接在主机上运行一样高的 TCP 传输速率。换句话说,在客户端内部运行的性能开销已经完全被消除了。

鉴于对一些用户的潜在性能提升,这个由 Daniel Borkmann 提出但也包含 Nikolay Aleksandrov 的补丁系列被迅速合并。它首次发布到 BPF 邮件列表上是在 9 月 26 日,然后在那里经过四次修订,一个月后应用于 6.7 合并窗口。这个功能并非适用于所有用户,但对于那些在容器或虚拟机中部署网络密集型应用程序的用户来说,这可能确实是个很有吸引力的功能。

全文完
LWN 文章遵循 CC BY-SA 4.0 许可协议。

欢迎分享、转载及基于现有协议再创作~

长按下面二维码关注,关注 LWN 深度文章以及开源社区的各种新近言论~

format,png

YOLO26算法水面与液体识别+训练好的模型+393张数据集+pyqt可视化界面.zip 附训练好的 YOLO 权重与 PyQt 可视化检测界面,页面底部含可视化效果预览,毕设/课设开箱即用。 【数据集概况】 · 检测类别(中文):[未获取()] 【训练曲线与评估图】 【模型训练配置】 参数 | 值 模型 | yolo26n 训练轮数 | 100 epochs 输入尺寸 | 640x640 批次大小 | 24 优化器 | auto 初始学习率 | 0.01 训练设备 【关键指标汇总】 训练了 52 个 epoch,最终轮指标: 指标 | 数值 mAP50 | **0.8528** mAP50-95 | 0.3441 Precision | 0.7729 Recall | 0.8354 train/box_loss | 1.5367 train/cls_loss | 1.0228 val/box_loss | 1.6809 val/cls_loss | 1.1758 【训练过程分析】 我这次训练了52个周期,模型在训练初期确实收敛速度很快,前20个周期mAP50从0.74逐步提升至0.82,这说明模型开始适应数据集,学习到一些关键特征。但到第30个周期后,提升速度逐渐放缓,到了40个周期时,mAP50达到0.85,这个阶段的曲线走势有些像磨砂玻璃,平滑且不规则,后期更是趋于平缓,表明模型可能已经达到最优解,再继续训练可能会有少量提升但代价较大。整体而言,从loss曲线来看,训练集的box_loss和cls_loss在52个周期内分别从1.80和1.25降到1.54和1.02,下降曲线较为稳定,但到了后期,这两项指标下降幅度逐渐减缓,尤其cls_loss下降至1.10左右后趋于稳定,这可能是模型对训练数据已有了较强的泛化能力,但也提示我们分类的稳定性可能还欠些火候。 至于验证集的表现,box_lo... 使用场景:毕业设计、课程设计、深度学习入门、工业场景落地验证。 立即下载

相关推荐

C#西门子上位机与PLC通讯++S7协议

支持S7-200,S7-300,S7-1200,S7-1500+使用技术C#+S7net

LWN:多种改善BPF性能的方案!

关注了就能看到更多这么棒的文章哦~A medley of performance-related BPF patchesByJonathan CorbetJanuary 2, 2020...

Linux News搬运工 980

MATLAB模拟6自由度无人机检查,具备干扰补偿、裂纹检测和自主复检功能。.zip

1.版本:matlab2014a/2019b/2024b 2.附赠案例数据可直接运行。 3.代码特点:参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象:计算机,电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。

LWN:P4TC 撞墙了!

关注了就能看到更多这么棒的文章哦~P4TC hits a brick wallBy Jonathan CorbetJune 10, 2024Gemini-1.5-flash translationhttps://lwn.net/Articles/977310/P4,简称“Programming Protocol-independent Packet Processors”(独立于协议的包处理器编程...

Linux News搬运工 1848

基于MATLAB的前向运动学和3D可视化,利用均匀变换和DH约定实现6自由度机器人机械臂的3D可视化。.zip

1.版本:matlab2014a/2019b/2024b 2.附赠案例数据可直接运行。 3.代码特点:参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象:计算机,电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。

AI大模型医学影像诊断智能识别应用方案.pptx

AI大模型医学影像诊断智能识别应用方案.pptx

LWN:6.3 合并窗口第一部分!

关注了就能看到更多这么棒的文章哦~The first half of the 6.3 merge windowBy Jonathan CorbetFebruary 23, 2023DeepL assisted translationhttps://lwn.net/Articles/923846/截至目前,已经有 5776 个 non-merge 的 changeset 被拉入 6.3 版本的 ma...

Linux News搬运工 1001

智能驾驶智慧交通行业智算中心(AIDC)建设规划方案.pptx

智能驾驶智慧交通行业智算中心(AIDC)建设规划方案.pptx

LWN:6.4 合并窗口,第一部分!

关注了就能看到更多这么棒的文章哦~6.4 Merge window, part 1By Jonathan CorbetApril 28, 2023DeepL assisted translationhttps://lwn.net/Articles/930068/截至目前,已经有将近 7500 个 non-merge changeset 被合入 6.4 内核版本的 mainline 仓库。6.4 版...

Linux News搬运工 1065

LLC谐振变换器恒压恒流双竞争闭环控制simulink仿真(附说明文档)

内容概要:本资源是一套面向电力电子与智能控制领域的综合性科研仿真资料合集,核心聚焦于LLC谐振变换器的恒压恒流双竞争闭环控制策略设计与Simulink建模仿真实现,涵盖半桥LLC、双向全桥LLC等拓扑结构的调频闭环仿真,并提供详尽的说明文档与PPT辅助材料。资源体系不仅深入呈现LLC变换器的动态响应与控制逻辑,还扩展至双有源桥(DAB)变换器的软开关协同优化、最小应力控制、EPS调制策略及新扩展移相角优化等前沿技术,同时集成三相PWM整流器在电网不平衡条件下的功率平衡控制、VOC+SVPWM双闭环控制等典型应用场景。此外,资源包涵盖状态估计(如EKF、UKF、PF)、微电网经济调度、卡尔曼滤波融合、神经网络控制、PID优化、储能系统管理等多个交叉方向,特别强调对顶级EI期刊研究成果的高精度复现,旨在帮助科研人员快速掌握先进控制算法的核心思想与仿真实现方法。; 适合人群:电气工程、自动化、电力电子、新能源科学与工程等相关专业的硕士博士研究生、高校科研人员,以及从事新能源变换器、智能电网、电动汽车、微电网系统研发的工程技术人员。; 使用场景及目标:① 深入理解LLC与DAB变换器的闭环控制机理,掌握恒压恒流切换、软开关实现与损耗优化方法;② 利用Simulink平台构建复杂电力电子系统模型,开展动态性能分析与控制器参数整定;③ 复现高水平期刊论文中的先进控制策略,提升科研创新能力与论文发表竞争力;④ 支持毕业设计、科研课题、项目申报及工程原型开发中的仿真验证环节。; 阅读建议:建议结合提供的完整资源目录循序渐进学习,优先研读标注“顶级EI复现”的案例以获取权威方法参考,配合MATLAB/Simulink动手搭建模型,重点关注控制框图设计、调制逻辑实现与仿真结果对比,深入理解算法背后的物理意义与数学推导过程。

概率神经网络的分类预测-基于PNN的变压器故障诊断(Matlab代码实现)

内容概要:本文系统阐述了基于概率神经网络(PNN)的变压器故障诊断方法,结合Matlab代码实现分类预测。通过提取变压器运行过程中的关键特征参数,构建PNN模型以实现对正常状态与典型故障状态(如绕组短路、铁芯故障等)的高效分类识别。文章深入剖析了PNN的网络结构、概率密度估计原理、训练机制及分类决策过程,并通过仿真实验验证了该方法在故障诊断任务中具备较高的准确率与鲁棒性,展现了其在电力系统状态监测与智能运维中的良好应用前景。; 适合人群:具备一定机器学习理论基础和Matlab编程能力的电气工程、自动化、智能电网等相关领域的研究生、科研人员以及从事电力设备状态监测与故障诊断工作的工程技术人员。; 使用场景及目标:①实现变压器早期故障的智能化诊断与预警,提升电力系统运行安全性;②为基于神经网络的工业设备故障分类任务提供可复现的算法实现范例与技术验证平台; 阅读建议:建议读者结合文中提供的Matlab代码,动手复现实验流程,深入理解PNN在实际分类问题中的参数配置、训练策略、性能评估方法,并鼓励将该方法迁移至其他电力设备或机电系统的故障诊断场景中进行拓展研究与优化改进。

LWN:关于更快进行网络传输的两个议题!

Borkmann 的想法是在物理网卡上预留一组队列,将这些队列绑定到 Cilium 的 Netkit (一个旨在帮助减少网络命名空间开销的内核驱动程序),并将这些队列专用于容器的网络命名空间。简而言之,发往虚拟机中运行的应用的网络数据包必须由物理硬件接收,由主机内核处理,转发到虚拟容器桥接网络 (virtual container bridge network),然后交给 QEMU 虚拟网络设备的主机端,传入虚拟机,最后由客户机内核处理。随后,Wang 提出了一些不同的、更具推测性的提升性能的想法。

Linux News搬运工 849

优快云首页 发布文章 优快云同步助手 多无人机面向城市空中交通的多无人机路径规划研究(Matlab代码实现) 37 100 摘要:会在推荐、列表等场景外露,帮助读者快速了解内容,支持

内容概要:本文围绕面向城市空中交通的多无人机路径规划问题展开研究,系统阐述了该领域的核心挑战与关键技术。文章首先定义了多无人机路径规划的问题,明确了包括飞行安全、避障、协同效率在内的多项约束条件与性能指标。随后,重点介绍了三大类路径规划方法:基于改进RRT算法和图论的全局路径规划方法,用于构建初始可行路径;基于动态风险场的模型预测控制和动态窗口法(DWA)的动态避障方法,以应对环境中的突发障碍;以及多无人机协同规划策略和分布式协同控制算法构成的局部协同调整方法,确保多机间的飞行安全与任务协同。研究通过搭建Matlab仿真实验平台,设计了多种复杂城市飞行场景,对所提方法进行了全面的仿真验证与结果对比分析,展示了各方法在不同场景下的有效性与优劣。; 适合人群:具备一定自动化、计算机或航空航天领域基础知识,从事无人机、智能交通、路径规划等相关方向研究的研发人员和研究生。; 使用场景及目标:①为城市空中交通管理系统(UATM)的设计与开发提供理论基础和技术参考;②应用于物流配送、城市巡检、应急救援等多无人机协同任务的路径规划算法设计与仿真验证;③作为相关领域科研工作的技术参考资料,推动多智能体协同决策与控制技术的发展。; 阅读建议:建议读者结合文中提供的Matlab代码进行实践操作,通过复现仿真结果加深对各类算法原理与实现细节的理解。在学习过程中,应重点关注全局规划与局部避障的结合机制,以及多机协同策略中的冲突消解逻辑。

AF_XDP

AF_XDP 是一个优化了高性能数据包处理的地址族。本文假设读者熟悉 BPF 和 XDP。。通过使用 XDP 程序中的 XDP_REDIRECT 动作,程序可以使用 bpf_redirect_map() 函数将入站帧重定向到其他启用了 XDP 的网络设备。AF_XDP 套接字使得 XDP 程序可以将帧重定向到用户空间应用程序中的内存缓冲区。一个 AF_XDP 套接字(XSK)通过普通的 socket() 系统调用创建。每个 XSK 关联两个环:RX 环和 TX 环。

weixin_46228614的博客 953

无刷直流电机BLDC转速电流双闭环+无位置传感器控制仿真【仿真+详解说明报告+参考文献】

内容概要:本文详细介绍了一套针对无刷直流电机(BLDC)的Simulink仿真资源包,核心内容涵盖转速电流双闭环控制与无位置传感器控制技术,重点采用滑模观测器(SMO)实现对转子位置与速度的精确估算,避免了物理位置传感器带来的成本与可靠性问题。资源包提供了多个高质量仿真模型,包括基于模糊PID与传统PID控制策略的对比分析、无感控制结合滑模观测器与双闭环PI控制的综合系统等,全面展示不同控制算法在动态响应、抗干扰能力及稳态精度方面的性能差异。所有模型均基于Matlab/Simulink平台构建,配套详尽的技术说明文档与参考文献,深入解析控制结构设计、观测器原理、参数整定方法及系统稳定性分析,适用于电机驱动系统的研究、教学演示与工程验证。; 适合人群:面向电气工程、自动化、控制科学与工程及相关专业的本科生、研究生、科研人员和工程技术人员,尤其适合从事电机控制、电力电子与运动控制系统研究的专业人士,具备自动控制理论基础和Matlab/Simulink基本操作能力者更易上手。; 使用场景及目标:① 深入学习并掌握无刷直流电机双闭环调速系统的工作原理与无位置传感器控制的关键技术;② 对比研究模糊PID与传统PID在电机控制中的动态性能与鲁棒性差异;③ 开展滑模观测器在非线性系统状态估计中的建模与仿真研究;④ 支持课程设计、毕业设计、科研项目申报及学术论文复现等实际应用场景。; 阅读建议:建议用户结合提供的详解说明报告,逐步运行各仿真模型,重点关注控制器参数调节过程、滑模观测器的设计细节及其收敛性表现,深入分析系统启动、负载突变、转速切换等工况下的响应特性,鼓励在此基础上进行控制算法改进、引入新型观测器或拓展至其他电机类型进行创新性研究。

【顶级EI复现】基于KKT条件与分段解析优化的双有源桥DC-DC变换器软开关协同最小应力闭环控制方法(Simulink仿真实现)

内容概要:本文提出了一种基于KKT条件与分段解析优化的双有源桥DC-DC变换器软开关协同最小应力闭环控制方法,旨在实现高效能、低损耗的电力变换控制。通过构建包含软开关约束与电流应力目标的优化模型,结合KKT最优性条件进行数学推导,对变换器的工作模态进行分段解析处理,精确求解出满足零电压开通(ZVS)且电流有效值最小的最优工作点。在此基础上设计了闭环控制系统,有效提升了变换器在全功率范围内的运行效率与动态响应性能。文中详细阐述了控制策略的理论推导过程、优化求解算法实现及Simulink仿真实验验证,充分展示了该方法在协同优化软开关范围与器件应力方面的优越性。; 适合人群:从事电力电子与电力传动、新能源发电系统、电动汽车及微电网等相关领域的科研人员与工程技术人员,具备一定的电路理论、最优控制理论与仿真建模基础。; 使用场景及目标:①用于高效率双有源桥变换器的先进控制策略研究与设计;②为解决传统移相控制中软开关范围受限与功率器件电流应力高的问题提供优化思路;③适用于车载充电机、直流配电系统、可再生能源并网等对高功率密度与高效率有严苛要求的应用场景。; 阅读建议:建议结合Simulink仿真模型深入理解控制算法的具体实现流程,重点关注KKT条件在非线性约束优化中的应用逻辑以及分段解析策略的设计思想,同时可通过对比传统单移相控制(SPS)或双重移相控制(DPS)方法,直观体会本方法在效率提升与应力抑制方面的综合优势。

基于ADMM的车辆路径问题与时间窗口(VRPTW)的问题分解方案(Matlab代码实现)

内容概要:本文系统介绍了基于交替方向乘子法(ADMM)的车辆路径问题与时间窗口(VRPTW)的分解求解方案,并提供了完整的Matlab代码实现。该方法通过引入ADMM这一经典的分布式优化算法,将原本复杂的全局耦合优化问题分解为多个可并行求解的子问题,借助拉格朗日乘子协调各子问题间的约束一致性,从而实现对大规模VRPTW问题的高效求解。文中详细阐述了问题建模过程、ADMM迭代框架的设计原理、收敛性保障机制以及关键参数的设置策略,突出体现了分布式优化在物流路径规划中的可扩展性优势,适用于城市配送、电商物流等实际场景中的路径优化需求。; 适合人群:具备运筹学、优化理论基础及Matlab编程能力,从事物流优化、智能交通、供应链管理或分布式算法研究的高校研究生、科研人员及相关领域工程师。; 使用场景及目标:①解决带时间窗约束的大规模车辆路径问题(VRPTW);②学习并掌握ADMM在组合优化问题中的分解建模与协调求解机制;③实现面向分布式计算架构的路径优化算法,提升求解效率与系统可扩展性; 阅读建议:此资源强调算法实现与工程应用的结合,建议读者在理解VRPTW经典数学模型的基础上,深入剖析ADMM的增广拉格朗日函数构建与变量更新流程,并通过调试Matlab代码掌握算法收敛性分析、罚参数调优及性能评估方法,还可进一步拓展至其他分布式优化场景进行对比研究。

无人机【扩展卡尔曼滤波器从IMU和GPS数据计算无人机的姿态】使用不变扩展卡尔曼滤波器对微型无人机状态估计进行传感器融合(Matlab代码实现)

内容概要:本文系统介绍了基于不变扩展卡尔曼滤波器(Invariant Extended Kalman Filter, IEKF)的微型无人机状态估计方法,重点实现IMU与GPS数据的传感器融合,以精确估计无人机的姿态、位置和速度等关键状态信息。相较于传统EKF,IEKF充分利用系统内在的几何结构特性,具有更强的数值稳定性和更优的误差收敛性能,能够有效抑制非线性系统中的估计漂移问题。文章详细阐述了IEKF的理论推导过程,包括状态预测、协方差更新与观测校正环节,并提供了完整的Matlab代码实现,便于读者复现算法并深入理解其工作机制。该方法显著提升了无人机在复杂动态环境下的导航精度与鲁棒性,适用于对高可靠性状态估计有较高要求的无人系统应用。; 适合人群:具备控制理论、非线性滤波、惯性导航或机器人状态估计基础,从事无人机导航、自主系统开发及相关研究的研究生、科研人员及工程技术人员。; 使用场景及目标:①深入理解IEKF在非线性系统状态估计中的优势及其相对于传统EKF的改进机制;②掌握IMU与GPS多传感器融合的基本架构与实现流程;③通过Matlab代码实践完成从理论建模到算法仿真的全过程,为构建高性能飞控系统或开展先进滤波算法研究奠定技术基础。; 阅读建议:建议结合非线性系统估计与李群理论背景知识进行学习,重点关注IEKF的状态演化模型设计与误差协方差更新逻辑,务必动手运行并调试所提供的Matlab代码,通过仿真实验对比不同工况下的滤波性能,从而深化对算法本质的理解与应用能力。

上一篇: LWN:6.7合并窗口的第一部分!
下一篇: LWN:KVM使用Guest-first memory!
LinuxNews搬运工
博客等级 码龄7年 438粉丝 20原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值