f2fs的checkpoint

最新推荐文章于 2024-06-07 17:30:11 发布
原创 最新推荐文章于 2024-06-07 17:30:11 发布 · 1.9k 阅读 · 5 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文详细介绍了F2FS文件系统的checkpoint过程，包括在sync、umount和前台清理时触发的情况。同时，解释了如何进行cp，涉及pagecache的flush、暂停写操作、元数据写回等步骤。此外，还阐述了F2FS的Roll-Back Recovery和Roll-Forward Recovery机制，确保系统在异常关机后的恢复能力，以提高fsync性能。

    checkpoint是为了提供一个一致的还原点，所以要记录某个一致的时刻（快照，数据和元数据一致），写到专有的CheckPoint area，持久化。

    进行cp的时机：sync    umount     foreground cleaning

    cp的过程：           1、把pagecache中的脏node和脏dentry block，flush到设备上

                                2、暂停写操作（包括create和mkdir）

                                3、元数据（NAT、SSA、SIT）写回到设备

                  4、把checkpoint pack(包含<1>Header and footer<2>NAT和SIT的bitmaps<3>NAT和SIT的jounal<4>Summary block of active segments<5>orphan blocks)

          

最低0.47元/天 解锁文章
qwerrfxgj
关注
f2fs学习笔记 -12. f2fs checkpoint[转]
HZero
01-11 1230
1.前言 本文主要记录checkpoint的过程 2.checkpoint的时机 1.gc: 当空闲segment 不足的时候，可以通过check point 释放。 2.sync:执行sync操作时 3.super_block: super block 的put_super 接口需要通过f2fs_write_checkpoint() 来把没有来得及umount导致的可能不一致的数据重新做一次check point。 3.checkpoint的流程 f2fs_sync_fs write_checkpoin
f2fs系列之六：checkpoint
weixin_34211761的博客
02-10 898
f2fs 的checkpoint 维护data、node和meta data(SIT,NAT)的数据一致性，把一起写到SSA区域的数据分别写回到SIT/NAT区域。 checkpoint 相关数据结构 super block区域里记录了checkpoint （CP)的起始block address，以及checkpoint 区域segment 的数量： struct f2fs_super_bloc...
F2FS之write_checkpoint
wenj12的博客
04-02 1840
F2FS需要在特定的时刻将Checkpoint的数据写入到磁盘中。 Checkpoint的时机 CP是一个开销很大的操作，因此合理选取CP时机，能够很好地提高性能。CP的触发时机有: 前台GC(FG_GC) FASTBOOT UMOUNT DISCARD RECOVERY TRIM 周期进行 因此F2FS有几个宏表示CP的触发原因: #define CP_UMOUNT 0x00000001 #define CP_FASTBOOT 0x00000002 #define CP_SYNC 0x00000004
F2FS源码分析-1.3 [F2FS 元数据布局部分] Checkpoint结构
Hubery的存储点滴
07-03 4622
Checkpoint结构 Checkpoint是维护F2FS的数据一致性的结构，它维护了系统当前的状态，例如segment的分配情况，node的分配情况，以及当前的active segment的状态等。F2FS在满足一定的条件的情况下，将当前系统的状态写入Checkpoint中，万一系统出现突然宕机，这个是F2FS可以从Checkpoint中恢复到上次回写时的状态，以保证数据的可恢复性。F2FS维...
F2FS文件系统二 实验分析f2fs文件系统
frank_zyp的博客
08-01 5454
一、环境准备： 1、ubuntu系统安装f2fs-tools：sudo apt-get install -y f2fs-tools 2、使用系统loop设备进行实践操作： dd if=/dev/zero of=device bs=4K count=51200 //200M losetup /dev/loop0 device //寻址可用的loop设备 mkfs.f2fs -l f...
F2FS源码分析-5.2 [数据恢复流程] 后滚恢复和Checkpoint的作用与实现
Hubery的存储点滴
10-10 2563
Checkpoint的作用与实现 后滚恢复即恢复到上一个Checkpoint点的元数据状态，因此F2FS需要在特定的时刻将Checkpoint的数据写入到磁盘中。 Checkpoint的时机 CP是一个开销很大的操作，因此合理选取CP时机，能够很好地提高性能。CP的触发时机有: 前台GC(FG_GC) FASTBOOT UMOUNT DISCARD RECOVERY TRIM 周期进行 因此F...
f2fs Checkpoint
最新发布
06-07
嗯，用户这次聚焦在F2FS文件系统的Checkpoint机制上，看来之前关于LFS背景的引用只是铺垫。用户可能是文件系统开发者或存储研究员，需要技术实现细节而非概念描述。注意到用户引用中提到了Log-structuredFileSystem...
4.3 F2FS
shenfan321的博客
09-27 702
基于LFS(Log-structured File System)类型，使用copy-on-write策略直接写到新的数据块上，避免等待block擦除的开销，解决了需要先擦后写的问题；：在设备的第一个Segment (2MB)内。考虑到冗余，有2个f2fs_super_block结构，包括整个磁盘的segment数量、各个管理区域的起始地址、支持的特性。append-only的日志写策略，将随机写转化成顺序写。为了保证数据一致性,分为CP #0和CP #1，每个CP占一个Segment（2MB）
F2FS之读取最新的checkpoint块
wenj12的博客
04-02 672
在F2FS文件系统中为了读取最新的CP块给超级块对象中的sbi->ckpt，是调用int get_valid_checkpoint(struct f2fs_sb_info *sbi)函数 。 int get_valid_checkpoint(struct f2fs_sb_info *sbi) { struct f2fs_checkpoint *cp_block; struct f2fs_super_block *fsb = sbi->raw_super;//磁盘超级块 struct pag
【文件系统】 F2FS文件系统学习
Sofine
04-16 3617
F2FS（Flash Friendly File System）是专门为Nand Flash设计的一个日志型文件系统，于2012年12月合入Linux3.8内核，Google也在2018年（Android P）将其吸收到安卓原生版本中，使所有使用安卓的厂商受益。
抛开代码细节看f2fs文件系统组织方式
内核工匠
06-07 3079
一、前言“文件系统是操作系统用于明确存储设备（常见的是磁盘，也有基于NAND Flash的固态硬盘）或分区上的文件的方法和数据结构；即在存储设备上组织文件的方法。操作系统中负责管理和存储文件信息的软件机构称为文件管理系统，简称文件系统。文件系统由三部分组成：文件系统的接口，对对象操纵和管理的软件集合，对象及属性。从系统角度来看，文件系统是对文件存储设备的空间进行组织和分配，负责文件存储并对存入的...
f2fs学习笔记 - 1. f2fs概述
HZero
01-10 8948
1. 前言 本文主要通过回答几个问题来概要了解f2fs，这几个问题包括： f2fs是什么？ 为何引入f2fs? f2fs如何工作？ f2fs如何做到随机写入顺序化？ f2fs如何解决雪崩问题？ 2. f2fs是什么？ F2FS (Flash Friendly File System) 是专门针对SSD、eMMC、UFS等闪存设备设计的文件系统。基于LFS，同时解决了LFS的一些问题。由三星工程师Jaegeuk Kim于2012年10月发布到Linux社区，并于2012年12月进入Linux 3.8 内核
f2fs解析（二）f2fs写checkpoint时如何冻住整个文件系统
weixin_30243533的博客
09-14 292
函数write_checkpoint中，会调用block_operations，函数中有这样一段代码： retry_flush_dents: f2fs_lock_all(sbi); /* write all the dirty dentry pages */ if (get_pages(sbi, F2FS_DIRTY_DENTS)) { f2f...
checkpoint详解
zzwssfd
06-15 779
这段时间对checkpoint完成的工作很迷糊，参考http://www.dbabeta.com/2008/all_about_oracle_checkpoint.html#sec1
f2fs系列之八： 最全的SSA 总结
weixin_34337265的博客
02-13 1220
理解SSA的难点在于 SSA如何避免对SIT/NAT区域零星的写。这需要深入理解SSA 自身和相关的数据结构和协作关系。 data/node 根据数据冷热分区 分区的数据以log/journal 的形式落盘 每种类型当前写的segment/block 信息都记录在 内存cursegments 中 记录方式是 f2fs_summary_block ， 这个数据结构里面包含f2fs_journal 信...
f2fs系列文章——do_checkpoint关于data summary的两种写入方式
WaterWin的博客
11-26 1269
    为了保存current segment的summary信息，f2fs在do_checkpoint的时候会调用会调用write_data_summaries和write_node_summaries将其sumamries信息写到page cache中然后随后同步到磁盘中，其中write_node_summaries也是只有在umount和fastboot的情况下才会调用。我们可以看到writ...
f2fs 系列之四：写操作的相关流程
weixin_34396103的博客
02-04 975
背景 熟悉了文件系统的数据layout之后，理解它主要的IO路径（特别是写操作）是掌握一个文件系统必须要啃下来的骨头。F2FS也一样，IO相关的主要阶段包括：写提交；check point; GC。 写提交 IO相关的数据结构 最主要的两个数据结构如下： struct f2fs_io_info { struct f2fs_sb_info *sbi; /* f2fs_s...
文件系统 | 浅浅学习一下F2FS文件系统
marlos的博客
10-20 3212
F2FS全称为Flash Friendly File System，是专门为闪存设备设计的一个日志追加型文件系统（Append Logging File System）。相比于传统的日志型文件系统，F2FS在wandering tree和gc的高时间开销等问题上有一定的改进和优化。写了这么一段，其中就有了若干个奇奇怪怪的名词，我们先来逐个解释一下：日志型文件系统：参考知乎：日志型文件系统 - 原理...
F2FS文件系统架构与原理分析(二)——磁盘布局
zwj0403的专栏
10-23 5237
F2FS文件系统的磁盘布局分析 F2FS 将整个卷切分成大量的 Segments，每个 Segment 的大小是固定的2 MB。连续的若干个Segments 构成 Section，连续的若干个 Sections 构成 Zone。默认情况下一个 Zone 大的大小是一个 Section，而一个 Section 的大小是一个 Segment。 F2FS 将整个卷切分成6个区域，除了超级块(
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值