LLM之RAG实战（四十八）| AutoRAG：基于用户数据自动优化RAG pipeline的AutoML工具

论文题目：《AutoRAG: Automated Framework for optimization of Retrieval Augmented Generation Pipeline》

论文地址：https://arxiv.org/pdf/2410.20878

Github地址：https://github.com/Marker-Inc-Korea/AutoRAG

官方文档：https://docs.auto-rag.com/

一、AutoRAG介绍

       市面上有很多RAG pipelines和模块，但是针对具体的数据和场景的最佳实践是什么？是非常耗时和困难的。而AutoRAG可以通过自动化评估不同RAG模块组合来弥补上述困难。

特点：

• Data Creation：使用您自己的原始文档创建 RAG 评估数据。
• Optimization：自动运行实验，为您自己的数据找到最佳 RAG 管道。
• Deployment：使用单个 yaml 文件部署最佳 RAG 管道。还支持 Flask 服务器。

二、AutoRAG支持的RAG技术栈

2.1 数据模块

2.2 RAG优化模块