
3FS(Fire-Flyer File System)
文章平均质量分 95
为大家手把手教学AGI时代需要什么样的存储系统以及存储主要的应用场景,并提供一些存储系统编译和部署的过程中的技巧和思路。
九章云极DataCanvas
北京九章云极科技有限公司(九章云极DataCanvas)成立于2013年,以“创造智能,探索未知”为使命,致力于推动国际领先人工智能技术在智算产业的创新应用,助力全球企业智能升级,是中国人工智能基础设施领域的领军企业。如需技术合作或业务咨询,请移步vx: alayanew
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
3FS系列(三):从源码到实测:3FS USRBIO静态库的编译与性能体验
3FS 近期仍在持续被热议,在完成前篇所述的 3FS 元数据性能详测后,我们决定对 3FS 的另一项技术创新:FUSE与USRBIO并行使用开展编译与性能体验。我们发现,3FS 兼顾了 FUSE 的易用性与原生接口 USRBIO 的高速优势,在大部分场景中直接使用 FUSE 挂载,几乎「零改动」就能把 AI 任务迁移到 3FS,而对极限性能需求,则使用 USRBIO 的零拷贝、批量异步提交机制,大幅减少系统调用与网络交互开销,这对于大规模深度学习集群而言是一个值得参考与借鉴的设计。原创 2025-04-18 14:26:33 · 883 阅读 · 0 评论 -
3FS系列(二):3FS元数据性能深度拆解:那些在技术文档中找不到的实现细节
作为分布式存储领域的实践者,我们在深度测试3FS后既感受到技术突破的惊喜,也窥见了工程化落地的挑战。这种复杂的技术观感,或许正是开源项目从实验室走向生产环境的必经之路。若您在实践中有更精妙的参数调优方案,或是想深入探讨分布式存储的架构哲学,欢迎移步评论区 —— 或许下次我们就会一起探讨您提出的精彩观点。原创 2025-03-27 14:04:44 · 970 阅读 · 0 评论 -
3FS系列(一):存储新纪元的开篇——3FS编译调优与部署的工程实践
区别于过往巧妙算法的开源库,3FS 是完整的涉及多种节点、结合多种外部节点的高速并行文件系统,其代码结构清晰、模块间解耦程度高,充分展现了 DeepSeek 工程师对复杂工程的驾驭能力。作为人工智能基础软件方向的前沿力量,九章云极的研发大咖们近期也都在热议3FS,但我们今天不讨论3FS本身的产品设计,而是尝试借助我们存储方向的专业知识一步步抽丝剥茧、为大家手把手教学AGI时代需要什么样的存储系统以及存储主要的应用场景,并提供一些存储系统编译和部署的过程中的技巧和思路,希望能起到抛砖引玉的作用。原创 2025-03-14 15:49:27 · 1725 阅读 · 0 评论