老版本的课程学习：
支持把训练数据自动进行切割；训练从短样本，逐渐增加长度，最后是训练长样本；
Data Efficiency的课程学习：
可以用户自定义"难度"计算函数；
系统提供MapReduce在多CPU上执行数据的难度统计；
Random layerwise token dropping (random-LTD)
DeepSpeed的课程学习、Data Efficiency
于 2024-06-10 12:49:57 首次发布
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
