叮！您收到了一封来自达坦科技的Hackthon邀请函-优快云博客

本文链接：https://blog.youkuaiyun.com/DatenLord/article/details/134471774

DatenLord Hackathon 2023正式启动！达坦科技基于其跨云分布式文件系统DatenLord项目，结合AI大模型时代背景，搭建了擂台，在此正式向您发出邀约！

本次大赛赛题深刻有趣，奖品丰厚多样，借此机会您不仅可以尽情施展才华、与来自全国各地优秀的青年才俊们同台PK，更将有机会与优秀的评委教师对话交流。Clock is Ticking！无需犹豫，行动起来，抓住机遇，创造奇迹！

主题

Explore the Possibilities

大赛时间线

报名+组队：11.18～12.10

组委会整理报名资料：12.10-12.12

开发：12.12～12.15

作品提交：12.16

作品初评：12.17～12.23（评委会投票）

大赛线上路演：12.28

作品颁奖：12.30

背景介绍

AI 大模型的时代已经来临，大模型训练和推导对数据访问速率的要求也比较高，在某些场景下对存储系统的压力会变得非常大。其中的一种访问 pattern 描述如下：在短时间内，集群中大多数机器对某一个（或者几个）大文件需要同步读取，如果能够在机器之间进行 p2p 的数据传输，存储服务的压力会大大减小，最终提高整个系统的运行效率。

赛题介绍

DatenLord 是跨云分布式文件系统，对上层提供 Posix 兼容的文件系统接口，同时针对多云多数据中心的场景进行数据访问加速。DatenLord 使用了本地缓存来加速文件访问速度，缓存中的数据从后端的持久化存储中读取，例如 S3 兼容的对象存储。在某些极端场景中，集群会对同一个或者几个大文件同时进行读取，此时后端的持久化存储的读取压力会剧增，大大降低整个系统的性能和响应速度。针对这种场景，我们需要对这种数据访问模式进行优化，实现缓存之间的 p2p 传输。请参赛选手（或者队伍）针对这种场景，为 DatenLord 设计并实现缓存 p2p 传输和同步模块。