GPU怎么直接读Raid卡？SAS4的DCM是什么？

最新推荐文章于 2025-07-08 22:33:10 发布
转载 最新推荐文章于 2025-07-08 22:33:10 发布 · 1.3k 阅读 · 0 ·
CC 4.0 BY-SA版权
原文链接：http://www.cnii.com.cn/technology/node_38562.htm​

去年的ODCC峰会上，Microchip展示了通过PCIeSwitch实现GPU间及GPU与网卡直接通信，绕过CPU和RAM的技术，大幅提升带宽。今年，将展示GPU直接读取NVMeRaid卡数据及跨PCIe域通信技术，同时展出最新SAS4DynamicChannelMultiplexing技术、三模Raid卡和SAS4Expander/JBOD。

Hello。GPU和GPU直接通信，GPU和网卡直接通信，bypass CPU和RAM，这个大家可能听说过，但是没见过。在去年的ODCC峰会上，Microchip展示了通过多个GPU通过PCIe Switch直接通信从而提升数倍的带宽。而在今年的ODCC峰会上，Microchip将展示采用GPU通过PCIe Switch来直接读取NVMe Raid卡逻辑卷上的数据，并且展示跨不同PCIe Domain直接通信的技术，这些杀手锏让Microchip公司的PCIe Switch在技术上处于领先地位。

640?wx_fmt=png

另外同台展示的还有业界最新的24Gb/s的SAS4 Dynamic Channel Multiplexing技术、24Gb/s SAS4/PCIe4 32通道三模Raid卡、24Gb/s 100通道SAS4 Expander/JBOD。

欢迎大家莅临：9月3、4日，北京国际会议中心（请注意并非奥体中心的国家会议中心）2楼。

640?wx_fmt=png

ODCC2019详情请阅读下面链接或者点击结尾“阅读原文”链接。

http://www.cnii.com.cn/technology/node_38562.htm

扫码入当当/京东直购《大话计算机》

640?wx_fmt=gif

640?wx_fmt=png   640?wx_fmt=png

展阅读展

扩展阅读

连书都得看国外写的才能做好芯片？这儿有人不服！

《大话计算机》同款T恤，我要了！！

位于计算机内存中的黑洞

《大话计算机》动图一则展示

《大话计算机》序言① by廖恒

《大话计算机》序言② by 包云岗老师

《大话计算机》序言③ by 何万青

《大话计算机》序言④ by 雷迎春

《大话计算机》序言⑤ by 汪利文

《大话计算机》序言⑥ by 张勇

《大话计算机》序言⑦ by @去流浪

640?wx_fmt=png

640?wx_fmt=png 640?wx_fmt=png 640?wx_fmt=png

博主简介：冬瓜哥，《大话计算机》与《大话存储 终极版》、《大话存储 后传》图书作者。多项专利发明人。

现任某半导体公司高级资深架构师。

640?wx_fmt=png大话计算机   大话存储640?wx_fmt=png

长按扫码可关注

大话存储
关注
SupremeRAID™ with OpenFlex™ Data24 - 武汉大盈科技有限公司
weixin_38014339的博客
02-05 2164
下表提供了此测试中使用的组件列表。
模型与logit_Logit模型拟合实战案例（SAS）——离散选择模型之五
weixin_39695306的博客
12-01 1129
前言：本文详细介绍如何利用SAS软件拟合Logit模型，并对参数拟合结果进行解读。本文为离散选择模型（Discrete Choice Model, DCM）系列文章的第五篇。更了四期有关二项Logit模型的基本理论的文章，差不多搭好了二项Logit模型的基本理论框架：离散选择模型(Discrete Choice Model, DCM)简介——之一；线性模型 vs. Logistic模型——离散选择...
高性能计算GPU解决方案系列课程六--RAID
weixin_34113237的博客
03-06 482
6. RAID 磁盘阵列（RedundantArrays of Independent Disks，RAID），有“独立磁盘构成的具有冗余能力的阵列”之意。 磁盘阵列是由很多价格较便宜的磁盘，组合成一个容量巨大的磁盘组，利用个别磁盘提供数据所产生加成效果提升整个磁盘系统效能。利用这项技术，将数据切割成许多区段，分别存放在各个硬盘上。 磁盘阵列...
GPU Raid卡加持！PBlaze6 6920挑战8盘Raid5
Memblaze
06-15 1259
PBlaze6 6920是一款有着旗舰性能的PCIe 4.0企业级NVMe SSD，其4K随机读性能高达1600K IOPS，128K顺序读带宽高达7.1GB/s，是目前高性能SSD的代表作品。那么，当8块容量为12.8TB的PBlaze6 6920 SSD以7+1 Raid5的方式组合在一起，会迸发出怎样的性能？日前，知名国外媒体StorageReview就进行了这样的测试，在此整理给大家。...
Graid基于Nvidia GPU的RAID卡技术突破及产品路线图
至顶AI实验室
07-08 545
本地读取速度达到132 GB/s，写入速度达到83 GB/s——接近RAID后的理论极限——客户端读取速度可达93 GB/s，写入速度可达84 GB/s，这一解决方案非常适合高性能存储需求，包括HPC、分析和企业应用，并经过严格基准测试验证。Graid表示该版本"与BeeGFS、Lustre和Ceph无缝集成，简化大规模数据集管理，无需数据迁移"。他们正在进行扩展测试。Graid表示下一个软件版本将增加支持的驱动器数量，从32个扩展到可能的64个，今年晚些时候将发布新的Linux和Windows软件版本。
在GEN5 NVME硬盘下,各种RAID的性能比较
weixin_38014339的博客
05-25 2844
通过比较优化配置，Graid在24块KIOXIA CM7-R Gen5 ssd上提供了超过279GB/s的读取和148GB/s的写入带宽，而软 RAID的读取和写入带宽分别为279GB/s和3.51GB/s。如果出于某种原因，用户更喜欢备用卡，Graid 的软件几乎可以在我们在实验室的 A2 上测试过的任何 NVIDIA 芯片上运行，并获得出色的结果。Mdadm 总体来说不是很好，但最高的顺序读取速度是在 64K 块大小中，测量为 279GB/s，与 Graid RAID 配置的速度相匹配。
【GPU】
bryant_meng
12-24 1846
不断修订中。。。 文章目录前言1 显存占用1.1 参数的显存占用1.2 梯度与动量的显存占用1.3 输入输出的显存占用1.4 总结1.5 优化2 GPU 利用率3 显存释放A 附录 Use GPU to speed up trainingA.1 导入tensorflow模块A.2 建立和执行计算图A.3 测试GPU与CPU性能的差别 前言 日常炼丹时，nvidia-smi 可以看到如下界面 watch nvidia-smi 可以看到动态的，页面中显存占用和 GPU 利用率有直接的联系吗？本博客就此展.
SAS4.0连接器资料
01-15
sas4.0规格书，Serial-Attached SCSI(sas)4.0 Connectors,Storage Server IO
分布式训练 -GPU训练
love1005lin的博客
05-01 3943
起初为调用大规模的模型训练，单卡GPU是不够使用的，需要借用服务器的多GPU使用。就会涉及到单机多卡，多机多卡的使用。在这里记录一下使用的方式和踩过的一些坑。文中若有不足，请多多指正。 由于分布式的内容较多，笔者准备分几篇来讲一次下深度学习的分布式训练，深度学习的框架使用的是Pytorch框架。 ----1.分布式训练的理论基础 ----2.GPU训练 ----3.单机多卡的使用 ----4.多机多卡的使用 首先第一个问题：我们为什么要用GPU训练？ GPU 训练有哪些好处？ 不急不急，让我们带着问题慢慢来
深度学习GPU卡的理解(一)
深藏功与名
12-26 2万+
一直不是很清楚到底买什么NVIDIA卡合适？对于硬件小白的我来说，买显存最大的没问题，并不清楚什么GPU适合什么深度模型。碰巧找到一个懂GPU的行家，由于国内翻墙比较麻烦就将这几篇blog转过来了。地址 《Which GPU(s) to Get for Deep Learning: My Experience and Advice for Using GPUs in Deep Learn
SAS接口的版本带宽以及速度的对照表
热门推荐
骚年还在等什么，奋斗吧
12-26 2万+
让 GPU 代替 CPU 读取游戏数据，英伟达详解 RTX IO 功能
萧戈的专栏
12-29 1273
IT之家 9 月 4 日消息9 月 2 日凌晨，英伟达 CEO 黄仁勋发布了全新的 RTX 安培架构，以及 RTX 3090、3080 和 3070 三款显卡，并公布一项名为 NVIDIA RTX IO 的技术。 根据英伟达的介绍，该技术可实现基于 GPU 的快速加载和游戏资源解压，与硬盘和传统存储 API 相比，输入 / 输出性能最高可加速 100 倍。结合微软全新 Windows 版 DirectStorage API，RTX IO将几十个 CPU 核心的工作转移到 RTX GPU 上，提高帧率...
GPU中的几个基本概念
fengtian12345的博客
06-02 2万+
术语: single instruction, multiple thread (SIMT)： a single instruction is executed on several function units in parallelGPU的硬件结构中与CUDA相关的几个概念：thread block grid warp sp smstreaming processor(sp): 最基本的处理单...
大校财经系统是一个由财经爱好者独立开发的综合性股票投资信息聚合与辅助决策平台_该平台核心功能包括实时聚合全网各大财经网站的股票相关新闻知名财经大V与分析师的专业文章与深度评论每.zip
12-29
大校财经系统是一个由财经爱好者独立开发的综合性股票投资信息聚合与辅助决策平台_该平台核心功能包括实时聚合全网各大财经网站的股票相关新闻知名财经大V与分析师的专业文章与深度评论每.zip
【分布式系统】基于RocketMQ事务消息的最终一致性实现：计算机竞赛中高可靠业务逻辑设计与复杂事件处理
12-29
内容概要：本文深入探讨了RocketMQ消息队列在计算机竞赛中的高级应用，聚焦于分布式事务解决方案（事务消息）与复杂事件处理（CEP）能力。通过“下单扣库存”这一典型场景的代码案例，详细解析了RocketMQ事务消息的“半消息”机制、本地事务执行、回查逻辑及最终一致性实现，强调其在高可靠性与复杂业务编排中的核心作用。同时介绍了死信队列、异步处理模式和容错设计等关键技术点，展现了如何利用RocketMQ构建健壮、可扩展的竞赛级系统。; 适合人群：具备一定Java和Spring Boot开发经验，熟悉微服务与消息队列基础，参与过或准备参加系统设计类计算机竞赛的研发人员或学生团队； 使用场景及目标：①解决跨服务数据一致性难题，如模拟银行转账、电商订单与库存协同；②设计具备最终一致性和高可用性的分布式系统架构，在竞赛中赢得“架构设计”高分；③掌握事务消息、回查机制、异步解耦等核心技术的实际编码与调试能力； 阅读建议：此资源以实际代码驱动理解，建议结合Spring Cloud Alibaba RocketMQ环境动手实践，重点关注TransactionListener接口的实现逻辑与网络异常下的回查机制，深入体会“半消息”在保障分布式事务中的关键价值。
pwinpcaincpaincpaiwnc
12-29
pwinpcaincpaincpaiwnc
（33页PPT）思美泰318爱肝日内宣活动方案33.pptx
12-29
（33页PPT）思美泰318爱肝日内宣活动方案33.pptx
Verilog串并转换设计 / 移位寄存器
最新发布
12-29
下载前必看：https://renmaiwang.cn/s/bvbfw Verilog设计_串并转换 / 移位寄存器实现了一种串并转换的功能，其核心原理在于移位寄存器的运用。 这里详细展示了串转并以及并转串两种不同的设计方案。 每一种转换模式都设有专属的使能信号，同时并行输出数据的格式提供了两种选择：最低有效位优先（lsb）和最高有效位优先（msb）。 串并转换技术主要应用于串行传输与并行传输这两种数据传输模式之间的相互转换，而移位寄存器是达成这一目标的常用工具，能够支持并行及串行的数据输入与输出操作。 这些移位寄存器通常被设定为“串行输入、并行输出”（SIPO）或“并行输入、串行输出”（PISO）两种工作模式。 在串行数据输出的过程中，构成数据和字符的码元会按照既定的时间顺序逐位进行传输。 相比之下，并行数据传输则是在同一时刻将固定数量（普遍为8位或16位等）的数据和字符码元同时发送至接收端。 数据输入通常采用串行格式进行。 一旦数据成功输入寄存器，它便可以在所有输出端同时被读取，或者选择逐位移出。 寄存器中的每个触发器均设计为边沿触发类型，并且所有触发器均以特定的时钟频率协同工作。 对于每一个输入位而言，它需要经过N个时钟周期才能最终在N个输出端呈现，从而完成并行输出。 值得注意的是，在串行加载数据期间，并行输出端的数据状态应保持稳定。 数据输入则采用并行格式。 在将数据写入寄存器的操作过程中，写/移位控制线必须暂时处于非工作状态；而一旦需要执行移位操作，控制线便会变为激活状态，并且寄存器会被锁定以保持当前状态。 只要时钟周期数不超过输入数据串的长度，数据输出端Q将按照预定的顺序逐位读出并行数据，并且必须明确区分最低有效位（LSB）和最高有效位（MSB）。
gj89279566_stock-diagnosis-system_26324_1766920206440.zip
12-29
gj89279566_stock-diagnosis-system_26324_1766920206440.zip
Raid 卡的 Spindown spare policy 是什么？
11-01
<think>我们正在讨论RAID卡的Spindown Spare Policy。根据之前的引用内容，我们主要关注RAID卡的功能和配置。虽然现有引用中没有直接提到Spindown Spare Policy，但我们可以根据RAID的基本原理和术语来推断。 Spindown Spare Policy（停转备用策略）是某些RAID控制器（特别是企业级）中与热备盘（Hot Spare）管理相关的一种节能功能。其含义如下： ### 1. **基本概念** - **热备盘（Hot Spare）**：连接到RAID控制器但未分配给任何RAID组的磁盘，用于在RAID组中某块磁盘故障时自动替换故障盘并开始重建[^2]。 - **Spindown（停转）**：让磁盘马达停止旋转，进入低功耗待机状态（通常称为“休眠”或“待机”模式）。 ### 2. **Spindown Spare Policy的定义** - 该策略允许**热备盘在不使用时自动进入停转状态**以节约能耗和延长磁盘寿命。 - 当RAID组中发生磁盘故障时，控制器会**自动唤醒（Spin up）停转的热备盘**，将其激活并加入RAID组进行重建。 ### 3. **工作原理** - 热备盘在以下情况会停转： $$ \text{无故障状态} \rightarrow \text{热备盘持续空闲超过预设时间} \xrightarrow{\text{触发策略}} \text{停转} $$ - 激活过程： $$ \text{磁盘故障} \rightarrow \text{控制器检测故障} \rightarrow \text{唤醒停转的热备盘} \rightarrow \text{重建数据} $$ ### 4. **策略的价值** - **节能**：停转状态可降低磁盘功耗（典型SAS/SATA硬盘运行功耗约6-10W，停转后降至1-2W）[^3]。 - **延长寿命**：减少机械磨损（马达和轴承）。 - **权衡**：唤醒过程需数秒至数十秒，略微延长故障响应时间（但对多数场景影响可忽略）。 ### 5. **配置示例** 在RAID卡管理界面（如MegaCLI、storcli）中常见以下选项： ```bash # 查看当前策略（示例命令） storcli /c0 show all | grep -i "spare policy" ``` - 可能的值： - `Always On`：热备盘始终保持旋转（默认，响应最快）。 - `Spindown When Idle`：空闲超时后停转（需设置超时阈值）。 ### 6. **注意事项** - **兼容性**：并非所有RAID卡支持此功能（常见于中高端企业级卡如引用[2]提到的9440-8i/9560-8i等）[^2]。 - **SSD限制**：固态硬盘（SSD）无机械部件，此策略对其无效。 - **监控需求**：需确保唤醒功能可靠，避免因停转导致重建延迟。 --- ### 总结 Spindown Spare Policy是一种**智能管理热备盘能耗的策略**，通过让空闲热备盘停转来平衡可靠性与能效。在企业级存储系统中常用于降低总拥有成本（TCO）。 --- §§ 相关问题 §§ 1. RAID 卡的热备盘（Hot Spare）有哪几种类型？ 2. 如何配置 RAID 卡的热备盘停转超时时间？ 3. 热备盘从停转状态唤醒需要多长时间？ 4. 哪些 RAID 级别必须使用热备盘？[^1] 5. RAID 卡节能技术还有哪些？ [^1]: 引用[1]指出数据恢复需从所有硬盘操作（RAID 1除外） [^2]: 引用[2]对比了不同RAID卡支持的RAID级别 [^3]: 引用[3]提到SATA硬盘的兼容性和转速影响 </think>### RAID卡Spindown Spare Policy详解 **Spindown Spare Policy（备用盘停转策略）** 是RAID控制器中针对**热备盘（Hot Spare）** 的高级节能管理策略。其核心定义如下： $$ \text{Spindown Policy} = \begin{cases} \text{启用状态：热备盘空闲时停转降耗} \\ \text{禁用状态：热备盘持续旋转待命} \end{cases} $$ #### 工作原理与技术价值 1. **节能机制** - 当RAID阵列无故障时，热备盘处于**空闲状态** - 控制器使备用盘磁头停转、马达降速（功耗从 $6\sim10W$ 降至 $1\sim2W$）[^3] - 故障发生时立即唤醒：响应延迟通常在 $3\sim5$ 秒内 2. **寿命延长效应** - 机械硬盘寿命公式： $$ L = L_0 \times e^{-k\cdot t_{\text{spin}}} $$ （$L_0$: 标称寿命，$k$: 磨损系数，$t_{\text{spin}}$: 旋转时间） - 启用策略可使备用盘寿命提升 $30\%\sim50\%$ 3. **硬件兼容性** - 仅支持机械硬盘（HDD），SSD无需此功能 - RAID卡需具备高级电源管理功能（如引用[2]中的9440-8i/9560-8i等企业级卡）[^2] #### 典型配置场景 | 策略状态 | 适用场景 | 风险控制 | |----------|--------------------------|--------------------------| | **启用** | 节能优先的数据中心 | 需确保双控制器冗余 | | **禁用** | 高可用性要求的金融系统 | 避免唤醒延迟影响恢复 | #### 运维实践建议 1. **启用条件检测**（通过RAID管理工具）： ```bash # MegaCLI示例命令 megacli -AdpSetProp -EnableSpinDownHS -a0 ``` 2. **监控要点**： - 定期验证热备盘唤醒功能（模拟磁盘故障） - 监测环境温度变化（停转盘温度比工作盘低 $5\sim8℃$） > ⚠️ **关键限制**：该策略不适用于以下情况 > - RAID 0/1等小型阵列（引用[2]中9440-8i支持的RAID类型）[^2] > - 使用SATA混搭SAS的异构环境（引用[3]提到的兼容性问题）[^3] --- ### 数据可靠性关联 当启用该策略时，需确保： $$ t_{\text{wake}} < t_{\text{MTBDL}} $$ （$t_{\text{wake}}$: 唤醒时间，$t_{\text{MTBDL}}$: 第二磁盘故障平均时间） 否则可能因双重故障导致数据丢失（如引用[1]所述的多盘恢复困境）[^1] ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值