自定义 API 端点

本文介绍了如何扩展txtai API以在Python中创建自定义端点,通过FastAPI构建RAG端点,演示了创建嵌入数据库、启动API实例以及执行查询的过程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

txtai API是一项由FastAPI支持的基于 Web 的服务。语义搜索、LLM 编排和语言模型工作流程都可以通过 API 运行。

虽然 API 非常灵活并且可以通过 YAML 驱动的工作流程执行复杂的逻辑,但有些人可能更喜欢在 Python 中创建端点。

本文介绍 API 扩展,并展示如何使用它们来定义与 txtai 应用程序交互的自定义​​ Python 端点。

安装依赖项
安装txtai和所有依赖项。

# Install txtai
pip install txtai[api] datasets

定义扩展名
首先,我们将创建一个定义持久嵌入数据库和 LLM 的应用程序。然后我们将通过 API 将这两者组合成 RAG 端点。

下面的代码在 处创建一个 API 端点/rag。这是一个GET采用text参数作为输入的端点。

app.yml
# Embeddings index
writable: 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Q shen

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值