DeepSeek本地化部署并实现项目API接入:模型拉取Ollama+句子嵌入模型nomic-embed-text+数据投喂AnythingLLM+SpringBoot项目API接入

目录

一、Ollama下载DeepSeek模型

二、RAG工具nomic-embed-text使用

三、AnythingLLM数据投喂

四、SpringBoot项目通过API接入AnythingLLM

获取AnythingLLM工作区调用密钥

配置SpringBoot项目

编写API调用代码

测试与部署


一、Ollama下载DeepSeek模型

我是用Ollama下载DeepSeek模型的,这个我就不多说了,网上资料太多了,主要流程就是先下载安装Ollama,然后进入安装目录,打开cmd工具,通过如下命令行下载模型并启动模型:

ollama pull deepseek-r1:7b

ollama run deepseek-r1:7b

二、RAG工具nomic-embed-text使用

  1. 拉取nomic-embed-text模型

    • 在命令行输入Ollama提供的命令拉取nomic-embed-text模型,例如ollama pull nomic-embed-text
  2. 配置RAG系统

    • 使用langchain等框架,结合nomic-embed-text模型,构建RAG(检索增强生成)系统。
    • 配置文本嵌入模型,将文档数据量化成DeepSeek可识别的格式。

三、AnythingLLM数据投喂

  1. 下载安装AnythingLLM

    • 访问AnythingLLM官网,下载并安装适用于本地系统的版本。
  2. 准备数据

    • 将需要投喂的数据整理成AnythingLLM可识别的格式,如PDF、TXT、MD等。
  3. 数据投喂

    • 在AnythingLLM中创建工作区,上传准备好的数据。
    • 配置DeepSeek模型和nomic-embed-text嵌入模型,开始数据投喂过程。

以上流程很简单,就不展开讲了,主要说下怎么通过系统使用API方式与模型进行交互;

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

chen2017sheng

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值