soft raid5阅读笔记之二--读数据流程

最新推荐文章于 2020-04-12 13:34:12 发布

原创最新推荐文章于 2020-04-12 13:34:12 发布 · 985 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#raid

linux内核之软RAID 专栏收录该内容

15 篇文章

订阅专栏

博客虽未给出具体内容，但从标签可知与RAID相关。RAID是信息技术中重要概念，常用于数据存储等方面，能提升数据安全性、读写性能等。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

revoer001

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

soft raid5阅读笔记之一--数据结构

revoer001的博客

07-20

1164

1、raid5私有数据结构定义为raid5_conf_t： struct raid5_private_data { struct hlist_head *stripe_hashtbl; //所有的stripe_head通过hash连接件链入哈希表的哈希表头 mddev_t *mddev; //管理M

磁盘管理——RAID 5

DBA@Robin

08-18

4162

RAID Level 5 是一种储存性能、数据安全和存储成本兼顾的存储解决方案。

1 条评论您还未登录，请先登录后发表或查看评论

从原理到实现，RAID5原理详解及代码实现浅析

shuningzhang的专栏

08-29

8462

前文我们介绍了Linux下面的RAID技术基本原理，并通过RAID1介绍了其大致的实现流程。今天我们介绍一下RAID5，因为RAID5还是比较复杂的，因此觉得有必要介绍一下。 RAID5的算法关于RAID5的算法，我们在网上看到最多的一张图恐怕就是下面这张图了。这张图基本上说明了RAID5的算法，但还不够。在这张图中讲清了RAID5的关键是有一个校验数据块，校验数据块按照规则分布在不同的磁盘...

RAID5读写过程

cojm55771的博客

02-12

2147

用简单的语言来表示，至少使用3块硬盘（也可以更多）组建RAID5磁盘阵列，当有数据写入硬盘的时候，按照1块硬盘的方式就是直接写入这块硬盘的磁道，如果是RAID5的话这次数据写入会分根据算法分成3部分，然后写入这3...

RAID 5 使用与配置

热门推荐

nieji3057的博客

07-09

6万+

服务器DELL R370 配备4块2T磁盘采用RAID5（3块）+一块热备盘。ABC做raid5，D做热备盘，B坏了，D替代B，A和C会往D里面写数据，这期间不需要对硬盘做任何操作。写完以后，你再换掉坏盘B，阵列卡会识别到B盘，D盘将数据写入B，恢复ABC的raid5，D盘依旧为热备盘。这种策略相对安全，并且服务器存储空间是两个硬盘的容量。为什么3个硬盘的组成的RAID-5阵列大小只有2个硬盘的容...

soft raid5阅读笔记之五--同步

revoer001的博客

07-21

6290

resync：由成员磁盘计算出校验磁盘的过程，即初始化时需要同步； recovery：当成员磁盘出现故障，由其它的磁盘和校验盘进行计算获得该故障磁盘数据的过程； md_ioctl()函数中对SET_DISK_FAULTY的处理会调用set_disk_faulty()函数，该函数的参数：mddev：指向md设备的描述符指针；dev：md设备的设备号。从函数名可以看出，该函数是要设

soft raid5阅读笔记之八--磁盘扩展（reshape）

revoer001的博客

07-23

2013

我们先来看看如何使用raid的reshape功能，在网上查资料说必须在有spare备用磁盘且必须指定backup备份文件的条件下，才可以进行磁盘扩展reshape，下面是我的使用记录： 1、如果磁盘没有spare备用磁盘则提示如下错误： 2、未指定backup备份文件，在superblock1.2版本下，可以正确扩展磁盘：从上面的使用可以看出，在superblock

soft raid5阅读笔记之十一--RAID6

revoer001的博客

07-23

3614

1、校验和检查，如果不一致，则通过计算获取正确值，再写入到磁盘中，这里只根据状态设置相应的标志位，以便后续的操作： static void handle_parity_checks6(raid5_conf_t *conf, struct stripe_head *sh, struct stripe_head_state *s,

soft raid5阅读笔记之六--修复

revoer001的博客

07-21

2569

上一篇中提到了resync和recovery的区别，这篇主要来看看raid5对于修复的处理流程。首先先将mddev->recovery的一些状态做一些介绍： #define MD_RECOVERY_RUNNING 0 //resync或是recovery正在运行 #define MD_RECOVERY_SYNC 1

RAID5和RAID10在磁盘读写选择对比

pzk417的专栏

07-08

1万+

磁盘读写速度的关键之一：Cache cache技术最近几年，在磁盘存储技术上，发展的非常迅速，作为高端存储，cache已经是整个存储的核心所在，就是中低端存储，也有很大的cache存在，包括最简单的RAID卡，一般都包含有几十，甚至几百兆的RAID cache。 cache的主要作用是什么呢？作为缓存，cache的作用具体体现在读与写两个不同的方面：作为写，一般存储阵列只要求数

soft raid5阅读笔记之四--读成员磁盘错误的处理

revoer001的博客

07-20

1500

在读取成员磁盘的过程中，可能会出错，错误来自于底层报告的错误，进而将该成员磁盘标记为故障磁盘。这部分从raid5_end_read_request()函数说起。 static void raid5_end_read_request(struct bio * bi, int error) { struct stripe_head *sh = bi->bi_privat

RAID5工作原理介绍

Linux运维的博客

03-31

1万+

RAID 5是一种存储性能、数据安全和存储成本兼顾的存储解决方案。以四个硬盘组成的RAID 5为例，其数据存储方式如图4所示：图中，P0为D0，D1和D2的奇偶校验信息，P1为D3，D4，D5的奇偶校验信息，以此类推。由图中可以看出，RAID 5不对存储的数据进行备份，而是把数据和相对应的奇偶校验信息存储到组成RAID 5的各个磁盘上，并且奇偶校验信息和相对应的数据分别存储于不同的磁盘上。当RAI

soft raid5阅读笔记之三--写数据流程

revoer001的博客

07-20

1261

Zedboard学习（五）----Linux下调试dma驱动

y183128184的博客

04-12

776

（一）PL电路搭建这个工程的目的主要是PS控制DMA模块进行一个数据回环的测试，我的PL端的工程是基于hdl-2018_r1改的，主要是添加了FIFO模块和DMA模块，这里DMA模块的工作模式选用的是Direct Register Mode模式。（二）进入SDK建立FSBL工程，之后生成BOOT.BIN文件，这里具体步骤参考Zedboard学习（四）----制作Linaro桌面版S...

一个IO的传奇一生（14）—— Linux中的MD开源RAID（2）

weixin_33843409的博客

09-07

255

续《一个IO的传奇一生（13）—— Linux中的MD开源RAID（1）》 4.6 make_request函数说明函数原型：static int make_request (request_queue_t *q, struct bio * bi)参数：*q，请求队列 *bi，IO请求数据结构各个RAID Level的IO请求函数相同，但是他们的实现是不一样的。RAID1...

玩转全志/索智S3 Zeta Linux开发（2）国际惯例helloworld

weixin_34418883的博客

08-15

546

Zeta提供了一个名为zmake的工具，zmake为S3 Zeta Linux开发提供了很多便利，zmake为开发者提供了：完整构建开发包：zmake all 编译内核：zmake kernel 编译引导程序：zmake uboot 打包文件系统：zmake rootfs 打包固件：zmake image 编译模块：zmake [模块...

Raid5 &Raid10 磁盘IOPS 计算方法

dangerous156的博客

03-20

1万+

IOPS 是指单位时间内系统能处理的I/O请求数量，一般以每秒处理的I/O请求数量为单位，I/O请求通常为读或写数据操作请求。随机读写频繁的应用，如OLTP，IOPS是关键衡量指标。数据吞吐量(Throughput)，指单位时间内可以成功传输的数据数量。对于大量顺序读写的应用，如VOD(Video On Demand)，则更关注吞吐量指标。磁盘完成一个I/O请求所花费的时间，它由寻道时间、旋转...

soft raid5阅读笔记之七--MD中的bitmap

revoer001的博客

07-23

1689

本节主要介绍MD中的bitmap的机制，该机制主要用于减少不必要的同步操作。在真正的数据IO写操作之前先将该chunk对应的bitmap内存中的bit位设置为1，写入磁盘文件bitmap文件中，而在真正的数据写完成之后，再将bitmap文件中的bit位清零。这样，在进行一次IO写操作中，就多了两次磁盘的写操作，势必影响IO的效率，因此，在linux内核中，关于这部分做了两个方面的优化：1）批量写入

RAID5重组与数据恢复的思路方法学习

相信未来！

04-12

1万+

环境是在2003下自己搭建的，5块5G的硬盘组成的RAID5，把每块硬盘单独做了镜像用来分析，分别是1.img—5.img 。首先用winhex打开5个镜像，如下图所示。分别查看5个镜像的0号扇区，发现都是MBR，经过计算分区大小，全是5G，也就是单个硬盘的大小。所以都不是RAID5逻辑盘的有效MBR。在向下搜索“55AA”，在1.img的63号扇区发现了一个DBR，如图其他镜像里搜索的扇区数比较...

yolov5-softnms流程图

最新发布

03-30

### YOLOv5 中 Soft-NMS 算法的流程图解析 YOLOv5 是一种高效的实时目标检测框架，而 NMS（Non-Maximum Suppression）作为其核心组件之一，在减少冗余预测框方面起着重要作用。Soft-NMS 是传统 NMS 的改进版本，通过调整置信度分数而非简单移除重叠框来实现更平滑的选择过程。以下是基于现有知识和参考资料构建的 Soft-NMS 流程描述： #### 软件需求与数据准备在实际应用中，通常会先完成数据读取操作[^4]。对于机器学习模型而言，这一步骤涉及加载训练集或测试集中用于评估的目标检测标注文件以及图像路径列表。 #### Soft-NMS 主要逻辑 1. **初始化参数**: 设定阈值 IoU (Intersection over Union)，并指定衰减因子 sigma 或其他控制策略。 2. **排序候选框**: 根据分类得分从高到低排列所有边界框。 3. **迭代处理**: - 对于当前最高评分框 A ，将其标记为最终保留结果的一部分； - 计算其余未决框相对于 A 的 IoU 值； - 应用惩罚机制更新这些竞争者的新概率估计——具体方法依赖所选变体形式； * Linear: 如果交并比超过设定界限，则按线性比例削减权重； * Gaussian: 利用正态分布函数自然降低关联项的重要性程度，无需显式界定临界点位置； 4. **重复直至结束条件满足**, 即当没有任何剩余项目或者达到预定数量上限为止。下面给出一段伪代码表示该算法的核心部分: ```python def soft_nms(dets, sigma=0.5, Nt=0.3, threshold=0.001, method=0): """ :param dets: ndarrays of shape (N, 5), where each row contains [x1, y1, x2, y2, score] :param sigma: float number representing gaussian decay factor when using 'gaussian' mode. Default value is set as recommended by original paper authors. :param Nt: non-maximum suppression overlap threshold; default at moderate level suggested therein too. :param threshold: minimum detection confidence below which detections get discarded completely after processing all others first. :param method: integer flag determining type of re-scoring rule applied during iteration steps: 0 -> linear rescaling within range defined via `Nt`; otherwise ('exponential') employs exponential damping governed solely through parameterized standard deviation term (`sigma`). Returns filtered bounding boxes along with their updated scores post-suppression procedure execution accordingly. """ # Implementation details omitted here... ``` 尽管上述内容并未直接提及任何特定图表资源链接[^1][^2], 它们共同构成了理解此类技术背景所需的基础理论支撑体系.