sealfs 一个世界冠军要开始写文件存储了

最新推荐文章于 2024-08-29 08:00:23 发布

原创

最新推荐文章于 2024-08-29 08:00:23 发布 · 517 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#docker;kubernetes;

sealfs是由世界级编程竞赛冠军设计的高性能分布式文件存储系统，旨在解决云原生环境下的存储问题。它旨在提供无缝、高性能的存储解决方案，并计划在一年内成为io500的榜首。sealfs考虑了本地存储的单点故障、现有分布式存储的性能和配置复杂性问题，提出了解决方案，如使用fuse和系统调用劫持以降低调用成本。此外，sealfs采用无元数据服务器的分布式架构，以提高效率，同时面临目录遍历和存储空间监控的挑战。

背景

sealfs 的作者拿过很多编程比赛的世界冠军或者非常好的名次：

2019.12 SSCAIT（国际星际争霸 AI 算法开发大赛）
**在“排位赛”中世界综合排名第 3 位，以 84%的胜率在“近 50 场胜率排行榜”中最高排名第二位。
2022.01 RLChina 智能体挑战赛 队长冠军
2018.08 天池阿里巴巴全球调度算法大赛 冠军 总名次 1/2116
2017.05 2017 华为软件精英挑战赛 全球总决赛二等奖，名次 2/10000+ 队长
2022.03 AI 球球大作战：Go-Bigger 多智能体决策智能挑战赛 总名次 10/1434 队长
2020.08 天池首届云原生编程挑战赛 赛道二内部赛道第一名，总名次 7/4031 队长

现在是 sealos 的合伙人，sealfs 也是为 sealos 而生的，准备做一个高性能分布式文件存储，如果整个 sealos 是云操作系统，那 sealfs 就是这个操作系统的磁盘。

sealfs 还有个伟大目标，就是在一年内拿下 io500 的榜首！希望能成功。

sealfs设计文档

丝滑，高性能的分布式文件存储

为什么要为云原生构建新的分布式文件存储

使用本地存储

单点故障
云原生应用使用本地持久化存储带来的最大问题是单点故障，由于数据位于某个特定的节点，节点宕机会导致数据不可用，受绑定的应用无法重启，也难以迁移到其他节点。此外单节点磁盘故障甚至会出现数据丢失的问题。
目前对于一些数据可靠性要求高的应用，都在应用层实现了分布式架构，本质上是将复杂性交给了应用，对于复杂的应用而言，成本过高。
存储规划与扩容
应用本地存储意味着需要对每个节点进行容量规划，在节点故障时还需要对原本的分布式架构进行额外的迁移配置，带来了巨大的工作量和出错概率。
另一方面，原本的容量不足时，进行节点扩容也是本地存储无法解决的难题。
性能效率低下由于磁盘设备IO，本