yinghuo233的博客

LLaMA-Factory源码调试和分析

AI大模型产品，在生产环境安装部署时，部署产品使用的harbor仓库时，会遇到容器启动报错：dial tcp 127.0.0.1:1514: connect: connection refused的异常问题     经过分析，发现在不同操作系统，尤其是国产操作系统，以及ubuntu等操作系统，出现启动失败，异常的问题频率更高。harbor不同版本出现的频率不一样，有的版本频繁，有的比较低，导致网上出现很多解决方法，但都是治标不治本，而且不利于不同操作系统的安装部署。

AI平台推出后，用户使用期间，在其远端数据中心存在大规模小文件数据集，而目前的文件存储系统，对于小文件的处理并不理想，而且，小文件处理也是业界难题。在巨大的市场中，总有想要自研，搭建自己平台的公司，对于资源有限的公司，上述两个课题的内容，都会遇到，并且需要解决。对于，提前入局，并持续在此领域工作、学习、研发的我来说，有幸在目前的公司，负责其中一项攻关课题，并取得突破，获得了相关成果。整理AI平台技术的同时，也会展示学习过程，以及遇到问题，如何分析、调研、验证，并最终应用到AI平台，解决相关问题的能力。