论文阅读:the composite-file FileSystem:Decoupling the one-to-one mapping of files and metadata

CFFS: 小文件高效存储
介绍了一种名为Composite-Filefs (CFFS) 的文件系统,该系统通过将多个小文件映射到单个inode节点,显著提高了webserver和软件开发场景下27%的性能。CFFS利用了小文件间元数据的冗余性,通过去重减少存储开销,并针对小文件频繁访问和按组访问的特点,设计了基于目录、嵌入引用及频率挖掘的聚集策略。

问题

这三种小文件聚集的方式,或是基于目录,或是基于reference,有没有其他的,在访问时动态变化分组的。

摘要

逻辑文件到物理元数据之间的映射关系可能被移除。提出了composite-file fs实现file到metadata的多对一的映射关系,提升了性能(什么性能,rename?delete?)。
另外这个fs貌似是在ext4上做的封装,底层还是ext4.

detail

one-to-one的映射在unix系统中,每个逻辑文件对应一个inode节点。本文提出的composite-file fs,聚集多个逻辑文件,关联到一个inode上,因为一起访问的文件经常共享相似的元数据子集,这可以去重(不用多个inode存储相同的数据)。与ext4相比,在webserver和软件开发的负载中,提升了27%的性能。

CFFS设计的原因是:

  1. 频繁访问小文件
  2. 冗余的元数据信息,例如文件拥有者的数量,访问权限都是有限的(意味着很大概率重复)
  3. 文件按组访问
  4. prefetch的限制:在小文件的情况下,表现并不好,甚至还有额外开销

CCFS:允许多个小文件合并共享一个inode
抽象出composite-file(经常一起访问的文件内容)和对应的composite inode,小文件中inode存储的原始信息,去重之后存储在cinode的额外信息,所以对小文件来说,之前的权限检查,检验等操作并没有变化。

将哪些文件合并到一个cfile中,与工作负载有很大关系,有几种策略来实现:

  1. 基于目录
  2. 嵌入引用聚集,比如html中会嵌入超链接,引用其他文件;编译,makefile和其他cpp,c,h文件。问题是需要针对特定text的语义了解
  3. 频率挖掘的聚集,用的数据挖掘的apriori算法。
    在这里插入图片描述
## 软件功能详细介绍 1. **文本片段管理**:可以添加、编辑、删除常用文本片段,方便快速调用 2. **分组管理**:支持创建多个分组,不同类型的文本片段可以分类存储 3. **热键绑定**:为每个文本片段绑定自定义热键,实现一键粘贴 4. **窗口置顶**:支持窗口置顶功能,方便在其他应用程序上直接使用 5. **自动隐藏**:可以设置自动隐藏,减少桌面占用空间 6. **数据持久化**:所有配置和文本片段会自动保存,下次启动时自动加载 ## 软件使用技巧说明 1. **快速添加文本**:在文本输入框中输入内容后,点击"添加内容"按钮即可快速添加 2. **批量管理**:可以同时编辑多个文本片段,提高管理效率 3. **热键冲突处理**:如果设置的热键与系统或其他软件冲突,会自动提示 4. **分组切换**:使用分组按钮可以快速切换不同类别的文本片段 5. **文本格式化**:支持在文本片段中使用换行符和制表符等格式 ## 软件操作方法指南 1. **启动软件**:双击"大飞哥软件自习室——快捷粘贴工具.exe"文件即可启动 2. **添加文本片段**: - 在主界面的文本输入框中输入要保存的内容 - 点击"添加内容"按钮 - 在弹出的对话框中设置热键和分组 - 点击"确定"保存 3. **使用热键粘贴**: - 确保软件处于运行状态 - 在需要粘贴的位置按下设置的热键 - 文本片段会自动粘贴到当前位置 4. **编辑文本片段**: - 选中要编辑的文本片段 - 点击"编辑"按钮 - 修改内容或热键设置 - 点击"确定"保存修改 5. **删除文本片段**: - 选中要删除的文本片段 - 点击"删除"按钮 - 在确认对话框中点击"确定"即可删除
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值