AMD KFD的SDMA Packet 类型和定义解析

DeeplyMind

已于 2025-10-23 15:18:50 修改

阅读量850

点赞数 19

CC 4.0 BY-SA版权

分类专栏： AMD ROCm runtime库实现剖析文章标签： linux 驱动开发 rocr KFD AMDGPU

于 2025-10-23 15:18:26 首次发布

本文链接：https://blog.youkuaiyun.com/shenjunpeng/article/details/153782193

AMD ROCm runtime库实现剖析专栏收录该内容

40 篇文章 ¥49.90 ¥99.00

订阅专栏

超级会员免费看

1. 概述

SDMA（System Direct Memory Access）是AMD GPU架构中的一种高效数据传输机制。SDMA通过一系列结构化的数据包（Packet）实现主机与设备间的内存操作、同步、信号等功能。本文档分析了SDMA Packet类型及其结构体实现，便于开发者理解和扩展SDMA相关功能。

2. SDMA Packet 类型

SDMA Packet通过op（操作码）和sub_op（子操作码）字段区分不同类型。主要类型如下：

类型	操作码 (`op`)	说明
NOP	0	空操作，无实际功能
COPY_LINEAR	1	线性内存拷

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

DeeplyMind

关注关注

19
点赞
踩
6

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

订阅专栏

手把手教你学PCIE--DMA机制（一）：SDMA的链式描述符功能简介

MHD0815的博客

05-09

287

链式描述符是一种机制，通过这种机制，DMA控制器可以自动处理一系列的数据传输任务，而不需要CPU的频繁干预。每个描述符包含有关数据传输的信息，如源地址、目的地址、传输大小等，并且每个描述符都可以指向下一个描述符，形成一个链表结构。当当前描述符指示的任务完成后，DMA控制器会自动获取并执行下一个描述符所指示的任务，直到链表结束。

AMD KFD驱动分析

tugouxp的专栏

03-03

2095

1./dev/kfd管理一组设备而并非单个设备，如果有多个HSA节点，则open kfd的上下文将会创建一个process，并为这个server上的所有可用的HSA节点分别创建上下文。2.如果/dev/kfd管理多个设备，那么驱动如何确定当前系统调用下来要访问那个HSA设备呢？方法是用户会在系统调用的参数中传入要操作的gpu_id.3.既然如此，进行系统调用前用户应用必须首先知道有那些GPU_ID,那么应用是如何知道的呢？

参与评论您还未登录，请先登录后发表或查看评论

AMDGPU doorbell offset分配

raykwok1150的博客

02-10

923

本文主要是debug AMDGPU SDMA的doorbell offset。

全文 AMD GPGPU 通信问题 - Understanding Data Movement in AMD Multi-GPU Systems with Infinity Fabric

eloudy的专栏

05-05

1690

现代 GPU 系统在不断发展，以满足科学和机器学习领域中计算密集型应用的需求。然而，硬件性能与实际应用中可实现的性能之间通常存在差距。这项工作旨在更深入地了解 AMD GPU 和 CPU 上的 Infinity Fabric 互连技术。我们提出了一种测试和评估方法，用于描述多 GPU 系统上数据传输的性能，重点研究 AMD MI250X GPU 上的不同通信方式，包括点对点通信和集合通信，以及 GPU 之间和主机 CPU 的内存分配策略。

AMD Instinct™ MI200 GPU内存空间概述

数字人生

09-30

1599

我们探讨了在AMD MI200平台上常用的一组内存空间，并介绍了每种内存空间的分配和释放方式，以及其设计目的。我们还讨论了在某些MI250X平台上，如何使用SDMA引擎可能限制带宽，以及如何启用页迁移显著提高管理内存的性能。以下是一些在MI200系统上使用各种内存空间的简单建议和注意事项：一些建议：1. 如果应用程序需要在设备和主机之间来回移动数据（单独分配），请在主机端使用固定内存。

AMD GPU 内核驱动分析(二)-video-ring的调度

tugouxp的专栏

09-17

2900

sched_main.c接口定义u32 point);

AMD GPU 内核驱动分析(一)总览

tugouxp的专栏

09-11

8239

和CPU相比，GPU中包含了大量的并行计算单元，适合处理像素，矩阵，坐标等大量同类型的数据，因此，很多LINUX上的应用程序为了能够利用GPU的加速功能，都试图和GPU直接打交道，因此，系统中可能有多个组件或者程序同时使用GPU，比如桌面系统中OpenGL的实现MESA。

AMD GPU 内核驱动分析(三)-gpu scheduler ring fence同步工作模型

tugouxp的专栏

10-03

3100

在Linux Kernel 的AMDGPU驱动实现中，dma-fence扮演着重要角色，AMDGPU的Render/解码操作可能涉及到多个方面同时引用buffer的情况，以渲染/视频解码场景为例，应用将渲染/解码命令写入和GPU共享的BUFFER之后，需要将任务提交给GPU的运行队列等待执行，这个时候，应用不仅要监听buffer中任务的执行情况，还要保证在任务执行完毕之前，不能再去修改BUFFER中的数据。而AMDGPU也需要排它性地执行BUFFER命令。

AMD KFD的BO设计分析系列6-5： Userptr BO的内存分配分析

deeplyMind

12-05

1335

本文分析了AMD GPU驱动中KFD子系统对用户态指针(userptr)内存的处理机制。当应用程序通过KFD_IOC_ALLOC_MEM_FLAGS_USERPTR标志分配内存时，驱动将用户空间内存映射到GPU地址空间。核心流程包括：IOCTL入口处理中检查地址对齐和设备内存；GPU内存对象分配时设置GTT和CPU双域；BO创建与初始化；以及通过init_user_pages()完成用户页面映射，包括保存用户地址、注册MMU通知器、获取用户页面和验证BO等步骤。该机制实现了GPU对用户态内存的安全高效访问。

AMD HSA 异构计算架构和AMD-KFD内核驱动&NVIDIA内核驱动

tugouxp的专栏

11-12

2880

AMD好像全部都开源了，听在AMD工作过的朋友讲，AMD为了开源，几乎将整个KMD代码全部重写，从这个角度看，AMD的开源热情甩NVIDIA几条街。

AMD KFD驱动技术分析11：SVM原理与核心概念

deeplyMind

08-26

465

本文介绍了SVM（共享虚拟内存）的概念及其在KFD驱动中的实现架构。SVM是一种允许CPU和GPU共享物理内存的机制，分为粗粒度、细粒度和原子操作三种类型，旨在消除数据拷贝瓶颈并简化编程。KFD驱动通过svm_range_list、svm_range等核心数据结构，为进程维护跨CPU/GPU的共享虚拟地址空间，支持动态内存迁移、页表同步和多GPU协作等功能。关键组件包括进程级SVM区间管理、内存迁移机制以及与Linux MMU的集成，实现了高效的内存资源共享和协同计算。

AMD KFD的BO设计分析系列6-3： VRAM BO的显存分配分析

deeplyMind

10-09

1055

本文分析了AMD GPU驱动中VRAM物理地址分配的代码实现，重点研究了TTM框架下ttm_resource的分配机制。核心流程包括：通过amdgpu_vram_mgr_new函数初始化资源结构体，使用drm_buddy_alloc_blocks分配物理地址块（支持连续/TOPDOWN等多种策略），并将物理地址信息绑定到ttm_resource结构体。drm_buddy分配器采用伙伴算法实现高效内存管理，支持地址范围约束和多种分配策略，是现代显卡驱动显存管理的核心基础设施。

零基础学习GPU 系统软件资源（5.1.1）--DMA 与数据传输优化DMA 控制器的底层原理

xiaoheshang_123的博客

05-22

1002

DMA（Direct Memory Access，直接内存访问）是计算机系统中用于加速外设与内存之间数据传输的核心技术。每个传输任务由多个内存片段（SG Entry）组成，DMA 控制器自动拼接这些片段，无需 CPU 参与。支持 DMA 直接与音频编解码器（如 S/PDIF、I2S）交互，绕过 CPU 的中间缓冲。支持多个 DMA 通道同时工作，每个通道独立处理不同外设的请求（如网络卡、磁盘控制器）。同步音频数据与系统时钟，确保端到端延迟低于 1ms。，对比其设计理念、硬件实现与适用场景。

linux内核radeon gpu源码解析6 —— radeon_driver_load_kms函数详解1

phmatthaus的专栏

02-19

1217

上一篇引出了radeon_driver_load_kms这个函数，这篇文章开始详细解析这个函数。这个函数是所有和GPU初始化相关的内容的起始点，调用radeon_device_init()来初始化非显示设备的硬件，调用radeon_modeset_init()来初始化显示设备相关的硬件（CRTC、connector、encoder等）。源码如下： drivers/gpu/drm/radeon/radeon_kms.c /** * radeon_driver_load_kms - Main lo.

Linux SSH配置密钥文件及免密登录

Tongyao

12-18

150

本文介绍了配置SSH免密登录的详细步骤：1）使用ssh-keygen生成RSA密钥对；2）将公钥加入authorized_keys文件；3）在A机器上传B机器私钥至.ssh目录；4）设置密钥权限为600；5）配置~/.ssh/config文件指定主机、用户和密钥路径；6）通过简化命令实现免密登录。整个过程强调了密钥权限设置的重要性，并提供了完整的配置示例。

【Linux】内网穿透（实操）/打洞

2401_83251330的博客

12-20

1618

我这里没有记录"，于是，直接将该报文丢弃了，这就是防火墙策略。现在B可以直接去找A：B到A小区保安处说“我找54321号保安亭的A”，保安查登记簿发现8765号保安亭的B在允许名单里，于是放行。利用一台具有公网IP的服务器作为“桥梁”或“中继站”，通过由内网设备主动发起的、持续的连接，在公网与内网之间建立一条虚拟的数据隧道，从而绕过NAT/防火墙的限制。最后，如何验证你的云服务器上的端口是否是可达的，可以被公网访问的，我们可以在cmd使用telnet，如果没有telnet,可以在powershell执行。

Linux 进程控制