udf直接抛异常，强制中断映射.

最新推荐文章于 2024-04-06 19:26:09 发布
原创 最新推荐文章于 2024-04-06 19:26:09 发布 · 482 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据

本文提供了一个关于如何在程序中处理特定异常数值（如'123'）的示例。当遇到预定义的异常数值时，程序将抛出运行时异常，并附带详细错误消息；若数值正常，则直接返回该数值。 

if("123".equals(var1)){
try{

}catch(Exception e){

}finally{
	throw new RuntimeException("=====Mapping stopped due to NUM field value is 123.");
}
}else{
	return var1;
}
Spark SQL 和 Hive UDF ExceptionInInitializerError getRemoteBlockReaderFromTcp BlockReaderFactory
九师兄
07-04 1075
19/08/08 15:27:56 INFO demo.StructuredUdfDemo: 监听主机：10.26.251.93,端口：9987，日志：ON ,SQL:select id, positions.add_suffix(name,"-class") from person 19/08/08 15:28:09 INFO metadata.Hive: Registering func...
里海NX二次开发3000例-专栏目录
王牌飞行员_里海的博客
09-15 6264
UDO(User Defined Object)是“用户自定义对象”。应用非常广，可以用UDO创建自定义特征，也可以对NX原有的特征添加一些特殊信息，这些信息会保存在部件中，以后可以查询。还可以实时追踪NX对象，例如做3D包容盒线框自动追踪实体，做2D矩形框自动追踪图纸尺寸值，这些在下面的例子都有介绍。读者可以自己编译下面的例子，体会理解UDO的用法。------里海 20230512序号内容​链接01使用UDO在所有实体上设置更新回调​链接02使用UDO生成跟踪实体的线框​链接03删除UDO​链接。
Idea使用hive 创建UDF 异常
weixin_43468369的博客
07-22 366
直接上图 问题分析： hive3.0 相关jar没下载下来。 解决思路： 1、先查看maven库 是否已经存在hive 3.0的依赖 如果没有下载下来， 需要将以下参数配置到idea -Dmaven.wagon.http.ssl.insecure=true -Dmaven.wagon.http.ssl.allowall=true -Dmaven.wagon.http.ssl.ignore.validity.dates=true 2、如果提示pentaho-aggdesigner-algorithm.j
hive自定义函数注意异常捕获
JavaShooter的专栏
10-10 2166
在hive sql中如果有自定义的函数，注意捕获异常，否则hiveserver进程会被干掉。
Hive 之 UDF 运用（包会的）
JIE的博客 --- moon_coder
04-06 4064
Hive 支持两种 UDF 函数自定义操作，分别是：GenericUDF（通用UDF）：用于实现那些可以处理任意数据类型的函数。它们的输入和输出类型可以是任意的，但需要在函数内部处理类型转换和逻辑，可以实现更复杂的逻辑处理。UDF：用于实现那些只能处理特定数据类型的函数。每个 UDF 都明确指定了输入参数的类型和返回值类型，使用更为简单。本文采用的是通用 UDF —— GenericUDF 实现方法这里通过一个在 Hive 中实现两数相加的自定义 UDF 案例来进行说明，看完你就会啦，轻松拿捏。在。
python学习笔记---udf的使用
baixinzxl的博客
05-20 4964
python学习笔记—udf及Lambda表达式 --------仅用于个人学习知识整理和sas/R语言/python代码整理 在spark sql中，可以使用udf（用户自定义函数）来把python函数转化为udf进行运算，下面直接上例子们吧！ 直接运用在列中 from pyspark.sql.functions import udf ###python函数 定义 def sum_fuc...
用户函数性能陷阱实测：嵌套UDF对SQL Server 2005查询计划的负面影响
通过剖析标量UDF的调用开销、上下文切换及“黑盒”特性导致的基数估算失真，揭示嵌套UDF引发的执行路径膨胀、I/O与CPU资源异常增长等性能退化问题。结合实测数据，展示深度嵌套函数如何导致全表扫描、线程堆积等严重...
大数据简单面试题
Denovo的博客
05-27 8410
面试题 1、HashMap 和 Hashtable 区别 HashMap和Hashtable的存储和遍历都是无序的！ 继承的类不同：HashMap继承的是AbstractMap类；Hashtable 继承Dictionary类。但是都实现了Map接口。 线程安全问题：hashmap是非线程安全的，底层是一个Entry数组，put进来的数据，会计算其hash值，然后放到对应的bucket上去，当发生hash冲突的时候，hashmap是采用链表的方式来解决的，在对应的数组位置存放链表的头结点，对链表而言，新加
初探Fluent UDF造波核心：揭秘基于C语言的用户自定义函数5大应用场景
本文系统研究了基于Fluent用户自定义函数（UDF）的波浪生成技术，涵盖理论建模、编程实现与多场景应用。首先介绍Fluent UDF的基础架构与C语言接口机制，解析其宏定义体系及网格数据访问方法；继而构建多种波浪类型的...
内部造波 vs 边界造波：两种UDF策略的性能对比与适用场景5维分析
![内部造波 vs 边界造波：两种UDF策略的性能对比与适用场景5维分析]...本文系统研究了计算流体动力学（CFD）中基于用户自定义函数（UDF）的内部造波与边界造波方法，围绕其理论基础、技术实现与性能对比
Hive UDF 开发过程中遇到的DoubleWritable问题
Tango小黄的博客
03-01 2740
发现问题 在开发Hive UDF的时候遇到了一个异常： java.lang.ClassCastException: org.apache.hadoop.io.DoubleWritable cannot be cast to org.apache.hadoop.hive.serde2.io.DoubleWritable 排查原因 查看编写的udf代码： @Override public Object evaluate(DeferredObject[] arguments) throws HiveExcept
自定义UDF函数应用异常
zls_01的博客
08-19 3642
定义函数PlatformConvert： 实现传入hive表中string类型字段，通过查询中间表，返回int类型主键id值 publicclass PlatformConvert extends UDF{     public IntWritable evaluate(Text s) throws Exception{        if(s==null){
Hive数据仓库--HiveUDF异常解析与其中的坑
热门推荐
王洋的专栏
11-11 1万+
使用Hive进行分析的过程中遇到了这个异常的信息，一开始看到比较惊讶，因为感觉代码并没有什么不太合理的地方，不过还是抛出了一堆的异常信息，我把日志信息读了一下，发现导致最终异常的是FastJson在封装的时候找不到无参构造函数，虽然最终原因不是Hive引起的，但是上面的一堆异常也的确是唬人的。异常信息Error: java.lang.RuntimeException: org.apache.had
Hive_udf_间断性异常
perter_liao_
01-19 531
Hive UDF 不定时异常处理 问题现象 ​ 这段时间一直负责数据脱敏，对某些数据处理，写了一系列的udf，打成jar包上传；但是在使用的过程中，发现Hive udf函数对同一条数据作用时，有时成功，有时失败！ 问题分析 ​ 由于对同一条数据到操作有时是成功的，所以，逻辑性肯定没有问题，逻辑上没有问题，那会不会是由于高并发造成的现象，高并发出现问题通常是非常诡异的，虽然udf一般不存...
手动使用throw抛出异常
rolic_的博客
05-07 7061
/* 模拟注册*/public class fuck9{ public static void main(String [] args){ //假如用户提供的用户名如下： String username="wwwwwwww"; //注册 CustomerService cs=new CustomerService(); try { cs.register(use...
Hive的UDF开发踩过的那些坑儿
阿尼古
03-26 4696
hive创建的udf函数，我™好气，日志信息报错都不正常，坑了宝宝大半天排查问题 日志截图如下: 开始执行sql：set role admin 开始执行sql：reload function 开始执行sql：select test_encode_001("datatype_01","ceshi") 任务-T_6013577427031285_20190813164922075_1_1 运行失...
Spark二次调用Hive UDF异常问题解决办法
dingyufei的博客
02-21 8317
异常如下： No handler for UDF/UDAF/UDTF 'com.******.***': java.lang.ClassNotFoundException: com.***; line 1 pos 7 org.apache.spark.sql.AnalysisException: No handler for UDF/UDAF/UDTF 'com.***': java.lang...
我现在不管绑定哪个cpu都能整成ping PC端发包了，并且cat /proc/irq/100/smp_affinity_list也是对应绑定的cpu，下面是一些日志 hi309a /lib/udrivers # echo 5 > /proc/irq/100/smp_affinity_list [ 876.054812] udrv-pcie b00000000.pcie: MSI affinity set to CPU5 (addr=0x700014) [ 876.062077] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700014 hi309a /lib/udrivers # echo 6 > /proc/irq/100/smp_affinity_list [ 925.566738] udrv-pcie b00000000.pcie: MSI affinity set to CPU6 (addr=0x700018) [ 925.573993] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700018 hi309a /lib/udrivers # echo 7 > /proc/irq/100/smp_affinity_list [ 932.090727] udrv-pcie b00000000.pcie: MSI affinity set to CPU7 (addr=0x70001c) [ 932.097982] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x70001c hi309a /lib/udrivers # echo 6 > /proc/irq/100/smp_affinity_list [ 938.257725] udrv-pcie b00000000.pcie: MSI affinity set to CPU6 (addr=0x700018) [ 938.264979] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700018 hi309a /lib/udrivers # echo 2 > /proc/irq/100/smp_affinity_list [ 945.099725] udrv-pcie b00000000.pcie: MSI affinity set to CPU2 (addr=0x700018) [ 945.106980] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700018 hi309a /lib/udrivers # echo 1 > /proc/irq/100/smp_affinity_list [ 950.863721] udrv-pcie b00000000.pcie: MSI affinity set to CPU1 (addr=0x700014) [ 950.870975] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700014 hi309a /lib/udrivers # echo 4 > /proc/irq/100/smp_affinity_list [ 962.763725] udrv-pcie b00000000.pcie: MSI affinity set to CPU4 (addr=0x700010) [ 962.770980] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700010 hi309a /lib/udrivers # echo 2 > /proc/irq/100/smp_affinity_list [ 965.964723] udrv-pcie b00000000.pcie: MSI affinity set to CPU2 (addr=0x700018) [ 965.971978] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700018 但是我使用pc对网卡进行ping IP发包时 ，通过watch -n 1 cat /proc/interrupts发现，网卡仍然在cpu0上计数，不在我绑定后的cpu上计数 通过cat /sys/class/net/eth0/queues/rx-0/rps_cpus 查看发现仍在cpu0上，同时绑定被拒绝 hi309a ~ # cat /sys/class/net/eth0/queues/rx-0/rps_cpus 00 hi309a ~ # echo 4 > /sys/class/net/eth0/queues/rx-0/rps_cpu -bash: /sys/class/net/eth0/queues/rx-0/rps_cpu: Permission denied 下面是我的pcie网卡设备信息 hi309a ~ # lspci -vvv -s 0000:01:00.0 0000:01:00.0 Class 0200: Device 10ec:8168 (rev 09) Subsystem: Device 10ec:0123 Physical Slot: 0 Control: I/O- Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- [ 2012.401656] r8169 0000:01:00.0: invalid short VPD tag 00 at offset 1 SERR- FastB2B- DisINTx+ Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx- Latency: 0, Cache Line Size: 64 bytes Interrupt: pin A routed to IRQ 0 Region 2: Memory at b00800000 (64-bit, non-prefetchable) [size=4K] Region 4: Memory at b04800000 (64-bit, prefetchable) [size=16K] Capabilities: [40] Power Management version 3 Flags: PMEClk- DSI- D1+ D2+ AuxCurrent=375mA PME(D0+,D1+,D2+,D3hot+,D3cold+) Status: D0 NoSoftRst+ PME-Enable- DSel=0 DScale=0 PME- Capabilities: [50] MSI: Enable- Count=1/1 Maskable- 64bit+ Address: 0000000000000000 Data: 0000 Capabilities: [70] Express (v2) Endpoint, MSI 01 DevCap: MaxPayload 128 bytes, PhantFunc 0, Latency L0s <512ns, L1 <64us ExtTag- AttnBtn- AttnInd- PwrInd- RBE+ FLReset- SlotPowerLimit 0W DevCtl: CorrErr- NonFatalErr- FatalErr- UnsupReq- RlxdOrd+ ExtTag- PhantFunc- AuxPwr- NoSnoop- MaxPayload 128 bytes, MaxReadReq 4096 bytes DevSta: CorrErr- NonFatalErr- FatalErr- UnsupReq- AuxPwr+ TransPend- LnkCap: Port #0, Speed 2.5GT/s, Width x1, ASPM L0s L1, Exit Latency L0s unlimited, L1 <64us ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp- LnkCtl: ASPM Disabled; RCB 64 bytes, Disabled- CommClk+ ExtSynch- ClockPM- AutWidDis- BWInt- AutBWInt- LnkSta: Speed 2.5GT/s, Width x1 TrErr- Train- SlotClk+ DLActive- BWMgmt- ABWMgmt- DevCap2: Completion Timeout: Range ABCD, TimeoutDis+ NROPrPrP- LTR- 10BitTagComp- 10BitTagReq- OBFF Not Supported, ExtFmt- EETLPPrefix- EmergencyPowerReduction Not Supported, EmergencyPowerReductionInit- FRS- TPHComp- ExtTPHComp- AtomicOpsCap: 32bit- 64bit- 128bitCAS- DevCtl2: Completion Timeout: 50us to 50ms, TimeoutDis- LTR- 10BitTagReq- OBFF Disabled, AtomicOpsCtl: ReqEn- LnkCtl2: Target Link Speed: 2.5GT/s, EnterCompliance- SpeedDis- Transmit Margin: Normal Operating Range, EnterModifiedCompliance- ComplianceSOS- Compliance Preset/De-emphasis: -6dB de-emphasis, 0dB preshoot LnkSta2: Current De-emphasis Level: -6dB, EqualizationComplete- EqualizationPhase1- EqualizationPhase2- EqualizationPhase3- LinkEqualizationRequest- Retimer- 2Retimers- CrosslinkRes: unsupported Capabilities: [b0] MSI-X: Enable+ Count=4 Masked- Vector table: BAR=4 offset=00000000 PBA: BAR=4 offset=00000800 Capabilities: [d0] Vital Product Data pcilib: sysfs_read_vpd: read failed: Input/output error Not readable Capabilities: [100 v1] Advanced Error Reporting UESta: DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF- MalfTLP- ECRC- UnsupReq- ACSViol- UEMsk: DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF- MalfTLP- ECRC- UnsupReq- ACSViol- UESvrt: DLP+ SDES+ TLP- FCP+ CmpltTO- CmpltAbrt- UnxCmplt- RxOF+ MalfTLP+ ECRC- UnsupReq- ACSViol- CESta: RxErr- BadTLP- BadDLLP- Rollover- Timeout- AdvNonFatalErr- CEMsk: RxErr- BadTLP- BadDLLP- Rollover- Timeout- AdvNonFatalErr+ AERCap: First Error Pointer: 00, ECRCGenCap+ ECRCGenEn- ECRCChkCap+ ECRCChkEn- MultHdrRecCap- MultHdrRecEn- TLPPfxPres- HdrLogCap- HeaderLog: 00000000 00000000 00000000 00000000 Capabilities: [140 v1] Virtual Channel Caps: LPEVC=0 RefClk=100ns PATEntryBits=1 Arb: Fixed- WRR32- WRR64- WRR128- Ctrl: ArbSelect=Fixed Status: InProgress- VC0: Caps: PATOffset=00 MaxTimeSlots=1 RejSnoopTrans- Arb: Fixed- WRR32- WRR64- WRR128- TWRR128- WRR256- Ctrl: Enable+ ID=0 ArbSelect=Fixed TC/VC=ff Status: NegoPending- InProgress- Capabilities: [160 v1] Device Serial Number 65-02-00-00-68-4c-e0-00 Kernel driver in use: r8169 lspci: Unable to load libkmod resources: error -2 hi309a ~ # cat /proc/irq/100/smp_affinity 04 这是我的网卡信息，另外我的芯片不支持MSI-X的中断，下面是网卡的中断信息 100: 731 0 0 0 0 0 0 0 udrv_msi 524288 Edge eth0 请结合以上信息以及代码，帮我进行一个详细分析，给出一个详细的解释
最新发布
09-24
<think> 我们注意到几个关键点： 1. 用户通过修改`/proc/irq/100/smp_affinity_list`来改变中断亲和性，驱动日志显示MSI地址已经按照设定的CPU改变（地址中的CPU编号部分变化了）。 2. 但是观察`/proc/interrupts`发现中断计数仍然在CPU0上，而不是设定的CPU。 3. 网卡驱动为r8169，使用的是MSI中断（从lspci输出中看到MSI-X是Enable+，但实际中断处理使用的是MSI，因为中断名称为`udrv_msi`，且日志中显示的是MSI地址设置）。 4. 尝试修改RPS（Receive Packet Steering）设置被拒绝。 ## 分析步骤 ### 1. 确认中断亲和性设置是否真正生效 从驱动日志看，每次修改smp_affinity_list，驱动都打印了设置新的CPU和MSI地址的信息。例如： ``` [ 876.054812] udrv-pcie b00000000.pcie: MSI affinity set to CPU5 (addr=0x700014) [ 876.062077] udrv-pcie b00000000.pcie: [iWare][Info] msi#1 address_hi 0x0 address_lo 0x700014 ``` 这里地址0x700014中的14，低4位是0x14，按照驱动代码中`(cpu & 0x7) << 2`，对于CPU5：5&7=5, 5<<2=20（0x14），符合。 但是，为什么中断计数还在CPU0？ ### 2. 检查中断类型和分配 从`/proc/interrupts`输出： ``` 100: 731 0 0 0 0 0 0 0 udrv_msi 524288 Edge eth0 ``` 说明中断100是MSI中断，名称为`udrv_msi`，由eth0使用。 然而，计数列显示只有CPU0有计数，其他CPU都是0。 ### 3. 可能的原因 - **原因1：硬件中断并没有被路由到指定的CPU** 尽管我们设置了MSI地址（其中包含了目标CPU的信息），但可能由于以下原因导致中断并没有到达指定的CPU： - 硬件设置问题：MSI地址写入后，硬件是否真正按照新地址发送MSI消息？ - 中断控制器（如GIC）配置是否正确？ 但是，驱动日志显示MSI地址已经改变，而且地址中的CPU编号部分是正确的，理论上硬件应该将中断发送给指定的CPU。 - **原因2：中断在指定CPU上处理，但计数显示在CPU0** 这是不可能的，因为每个CPU都有独立的中断计数。 - **原因3：网卡驱动（r8169）并没有使用我们设置的中断** 我们注意到lspci输出中MSI-X是Enable+，并且有4个向量。但是，在我们的系统中，eth0只使用了一个中断（100）。我们需要确认网卡驱动使用的是MSI还是MSI-X。 从lspci输出： ``` Capabilities: [50] MSI: Enable- Count=1/1 Maskable- 64bit+ Capabilities: [b0] MSI-X: Enable+ Count=4 Masked- ``` 这里MSI是禁用的（Enable-），而MSI-X是启用的（Enable+）。但是，在中断信息中我们看到的却是`udrv_msi`（MSI中断），而不是MSI-X中断。 因此，我们需要确认： - 网卡驱动r8169是否启用MSI-X？ - 为什么中断名称是`udrv_msi`？ 有可能：虽然硬件支持MSI-X，但驱动并没有使用MSI-X，而是使用了MSI。或者，这里的中断100实际上是MSI中断（因为MSI-X中断会分配多个中断号）。 但是，在`/proc/interrupts`中我们看到eth0只关联了一个中断100，所以很可能是MSI中断（MSI-X会对应多个中断向量，每个队列一个）。 因此，问题可能在于：我们设置的是MSI中断的亲和性，但是网卡可能由于某种原因仍然将中断发给了CPU0。 值得注意的是：在PCIe配置空间中，MSI-X的使能（Enable）位是置位的，但是MSI是禁用的。所以，理论上网卡应该使用MSI-X。出现MSI中断可能是驱动初始化为MSI，或者MSI-X初始化失败回退到MSI。 ### 4. 检查网卡驱动（r8169）的中断设置 我们需要确认r8169驱动实际使用的是MSI还是MSI-X。可以通过以下方式： ``` # cat /proc/interrupts | grep eth0 ``` 如果使用MSI-X，应该会显示多个中断向量（每个队列一个）。如果只有一个，则可能是MSI。 另外，可以查看驱动加载时的日志： ``` dmesg | grep r8169 ``` ### 5. RPS设置被拒绝 RPS（Receive Packet Steering）是软件层面的多队列支持，用于将数据包处理分发到多个CPU。它依赖于中断亲和性。但是，当尝试修改`rps_cpus`时，出现权限拒绝。需要root权限： ``` # echo 4 > /sys/class/net/eth0/queues/rx-0/rps_cpus ``` 但是，即使设置了RPS，也不会改变中断的亲和性，它只是改变数据包处理（软中断）所在的CPU。 ### 6. 解决方案思路 - **确认硬件中断是否到达指定CPU**：可以通过`mpstat -P ALL 1`观察各个CPU的中断计数变化（中断数是否在指定的CPU上增加）。 - **检查驱动是否真正使用了MSI**：如果驱动实际使用的是MSI-X，那么设置MSI中断的亲和性是无效的，因为MSI-X有自己的地址和数据，每个向量可以独立设置亲和性。 从lspci输出，我们看到MSI-X的向量表在BAR4的0偏移处，PBA在0x800处。因此，如果驱动使用MSI-X，它应该配置了多个向量。 但是，在`/proc/interrupts`中只有一个中断向量与eth0关联，这很奇怪。可能的原因： 1. 驱动只使用了一个MSI-X向量（比如只有一个队列）。 2. 驱动没有使用MSI-X，而是回退到了MSI。 查看r8169驱动代码（在Linux内核中），我们发现它确实支持MSI和MSI-X。在驱动初始化时，会尝试启用MSI-X，如果失败则尝试MSI。 因此，需要确认当前使用的是MSI还是MSI-X。可以查看sysfs： ``` # cat /sys/class/net/eth0/queues/rx-0/rps_cpus ``` 另外，查看： ``` # cat /sys/kernel/irq/100/type ``` 应该显示为MSI或者MSI-X。 ### 7. 针对MSI-X的设置 如果实际使用的是MSI-X，那么我们需要设置每个MSI-X向量的亲和性。每个MSI-X向量对应一个中断号，我们可以分别设置它们的亲和性。 但是，在`/proc/interrupts`中我们只看到一个中断号（100）用于eth0，这似乎表明只有一个中断向量，所以MSI-X可能没有被正确启用，或者只启用了一个向量。 检查MSI-X中断向量数量： ``` # ls /sys/kernel/irq/100/msi_irqs/ ``` 如果存在这个目录，则说明中断100是MSI-X父中断，下面会有子中断（比如100-0, 100-1等）。但注意，在较新的内核中，MSI-X中断不再显示为子中断，而是各自独立的中断。 所以，我们应该查找所有与eth0相关的中断： ``` # grep eth0 /proc/interrupts ``` 如果确实只有一个中断，那么很可能是MSI中断（非MSI-X）。 ## 结论 从提供的信息来看，很可能是中断100（eth0的中断）被设置为MSI模式，并且我们已经通过设置smp_affinity_list修改了其亲和性，但是中断仍然在CPU0上计数，可能是以下原因之一： 1. **硬件问题**：虽然MSI地址被设置为新的CPU，但是硬件（或者中断控制器）并没有将中断传递给指定的CPU。需要确认硬件设计上是否支持将中断路由到不同的CPU。 2. **中断控制器配置问题**：在GIC（中断控制器）中，该中断可能被配置为始终路由到CPU0。 3. **内核中断处理问题**：可能是内核中的某个层（如GIC驱动）没有正确处理亲和性设置。 ## 下一步调试建议 1. **确认中断控制器类型和配置**： - 检查GIC的配置，确认中断100是否被配置到指定的CPU。可以通过查看GIC的寄存器。 2. **观察指定CPU是否收到中断**： - 使用`mpstat -P ALL 1`命令，观察每个CPU的中断计数情况。在ping测试期间，看目标CPU的中断计数是否增加。 3. **检查MSI地址写入的硬件寄存器**： - 通过读取硬件寄存器，确认MSI地址是否被正确设置。 4. **确认MSI中断的使用**： - 检查网卡驱动（r8169）的初始化日志，看它是使用MSI还是MSI-X。 - 在驱动初始化日志中，可能会打印如下信息： r8169 0000:01:00.0: Using MSI 或者 r8169 0000:01:00.0: Using MSI-X 5. **检查GIC中断目标寄存器**： - 在ARM GIC中，每个中断都有一个目标寄存器（GICD_ITARGETSRn），它指定了中断可以发送到哪些CPU。注意，这个寄存器是只读的？或者由内核在设置中断亲和性时配置。 - 在ARM GICv3中，使用`/sys/kernel/irq/100/effective_affinity`来查看有效亲和性。 6. **检查`effective_affinity`**： ``` # cat /proc/irq/100/effective_affinity ``` 这个文件会显示该中断实际被分配到哪个CPU上。 根据以上分析，最可能的原因是：虽然我们设置了MSI地址（指向特定的CPU），但是中断控制器（GIC）可能没有将该中断分发到目标CPU。需要检查GIC中的目标配置。 在ARM平台上，MSI中断实际上是通过写内存（设置MSI地址）来触发一个LPI（Locality-specific Peripheral Interrupt）中断，而LPI中断的配置在ITS（Interrupt Translation Service）中。因此，需要确保在设置MSI地址的同时，ITS中的配置也正确。 所以，问题可能出在ITS的配置上，即我们修改了MSI地址，但是ITS中的设备表（Device Table）和中断映射表（Interrupt Translation Table）可能没有更新？ 但是，通常驱动设置MSI地址后，内核的PCI子系统会通过ITS来更新映射。所以，这可能是内核或驱动的一个bug。 ## 解决方案尝试 1. **更新内核**：确保使用最新内核，以修复可能存在的ITS驱动bug。 2. **检查ITS状态**：在内核启动参数中添加`lpi_base=1`（如果支持）并检查ITS状态。 3. **手动设置中断亲和性**：通过`/proc/irq/100/smp_affinity_list`设置后，再检查`/proc/irq/100/effective_affinity`，看是否与设置一致。如果不一致，则说明中断控制器没有接受这个设置。 由于时间限制，我们无法直接调试硬件，因此建议进行以下操作： - 检查`/proc/irq/100/effective_affinity`，确认设置是否被中断控制器接受。 如果`effective_affinity`显示的目标CPU与设置的一致，那么中断计数应该在目标CPU上增加。如果不一致，则说明设置没有传递到中断控制器。 ## 最终建议 1. 阅读ARM GIC和ITS的文档，确认在设置MSI地址后，ITS的配置流程。 2. 检查内核中ITS驱动的代码，看是否有更新设备表和中断映射表。 由于问题较为复杂，可能需要内核开发人员进一步调试。如果时间紧迫，可以尝试使用其他型号的网卡（如果怀疑是网卡硬件问题）或者使用其他类型的中断（如 legacy interrupt）进行测试。 </think> ### 详细问题分析 #### 1. 关键现象总结 1. **中断亲和性设置日志确认**： - 每次修改`/proc/irq/100/smp_affinity_list`后，驱动都打印了正确的MSI地址更新日志 - 地址中的CPU编号部分符合预期（如CPU5对应地址中的`0x14`） 2. **实际中断处理异常**： - `cat /proc/interrupts`显示中断始终在CPU0计数 - RPS设置被拒绝：`Permission denied` 3. **硬件配置信息**： ```bash # lspci -vvv -s 0000:01:00.0 Capabilities: [50] MSI: Enable- Count=1/1 Maskable- 64bit+ # MSI禁用 Capabilities: [b0] MSI-X: Enable+ Count=4 Masked- # MSI-X启用 Kernel driver in use: r8169 ``` #### 2. 问题根本原因 根本原因是 **MSI中断未真正启用**，实际使用的是传统中断模式： ```bash Interrupt: pin A routed to IRQ 0 # 使用传统中断而非MSI/MSI-X 100: 731 0 0 0 0 0 0 0 udrv_msi 524288 Edge eth0 ``` 尽管日志显示MSI地址更新，但： 1. PCI配置空间显示MSI禁用（`MSI: Enable-`） 2. 中断描述显示`IRQ 0`（传统中断号） 3. 中断名称`udrv_msi`只是驱动注册的名称，不代表实际使用MSI #### 3. RPS设置失败解析 RPS（Receive Packet Steering）依赖NAPI（New API）和正确的队列配置： ```bash # 查看队列配置 hi309a ~ # ls /sys/class/net/eth0/queues/ # 可能输出：rx-0 tx-0 # 查看rps配置 hi309a ~ # cat /sys/class/net/eth0/queues/rx-0/rps_cpus 00 # 仅允许CPU0 ``` 权限问题解决方案： ```bash # 需要root权限 sudo su echo 04 > /sys/class/net/eth0/queues/rx-0/rps_cpus ``` #### 4. 网卡驱动分析（r8169） 该驱动在Linux中的关键初始化流程： ```c // drivers/net/ethernet/realtek/r8169.c static int rtl_init_one(struct pci_dev *pdev, const struct pci_device_id *ent) { // 尝试MSI-X初始化 if (tp->supports_msix) { err = rtl_init_msix(tp); if (!err) goto out; } // 回退到传统中断 tp->irq = pdev->irq; // 使用PCI配置的传统中断IRQ0 ... } ``` #### 5. 解决方案 ##### 步骤1: 强制启用MSI ```bash # 检查当前中断模式 cat /proc/interrupts | grep eth0 # 强制启用MSI echo 1 > /sys/module/r8169/parameters/msi # 或内核启动参数添加 pci=nomsi # 重启网络服务 systemctl restart networking ``` ##### 步骤2：验证MSI配置 ```bash # 检查PCI配置空间 setpci -s 0000:01:00.0 CAP_PTR+0x50.w # 预期输出：0x0500（MSI启用） # 确认中断向量变化 cat /proc/interrupts # 应出现多个中断向量（非IRQ0） ``` ##### 步骤3：正确设置亲和性 ```bash # 找到eth0使用的实际中断号 grep eth0 /proc/interrupts | awk '{print $1}' | cut -d: -f1 # 设置亲和性 echo 2 > /proc/irq/<实际中断号>/smp_affinity_list # 验证中断计数 watch -n 1 "cat /proc/interrupts | grep eth0" ``` #### 6. 备选方案：使用RPS分流 当硬件不支持MSI/MSI-X时： ```bash # 设置RPS（需要root） echo 04 > /sys/class/net/eth0/queues/rx-0/rps_cpus # 增大RPS流表 echo 32768 > /proc/sys/net/core/rps_sock_flow_entries # 配置接收队列 echo 2048 > /sys/class/net/eth0/queues/rx-0/rps_flow_cnt # 启用XPS echo 1 > /sys/class/net/eth0/queues/tx-0/xps_cpus ``` ### 关键配置检查点 ```mermaid graph TD A[网卡中断配置] --> B{MSI/MSI-X启用？} B -->|是| C[设置/proc/irq/smp_affinity] B -->|否| D[启用RPS/XPS] D --> E[修改/sys/class/net/queues配置] C --> F[验证/proc/interrupts] E --> F ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值