一直在思考如何利用AI大模型提升工作效率,但由于工作环境的限制,一直处于观望状态,未能实际操作。最近,随着DeepSeek的走红,网上关于本地部署大模型和构建个人专用知识库的相关视频越来越多,这让我看到了希望。由于工作的特殊性,我无法将文档资料上传到公有云或使用类似ChatGPT的大模型,因此一直希望能在本地部署大模型,无需联网,就能训练自己的数据并构建专属知识库。这样,无论是查找资料还是快速生成报告,都能更加精准和高效。近期,我查阅了大量相关文献,并整理了关于本地部署DeepSeek R1搭建个人知识库的内容。
文章目录
方法一
一、安装Ollama
1、Ollama官网下载
Ollama官网客户端下载链接[https://www.ollama.com/download]
根据操作系统进行选择

2、打开命令行
使用键盘的win键 + R键,输入cmd,打开命令行窗口,在命令行里输入ollama。

出现提示词,安装成功
二、选择模型
1、在Ollama官网库选择模型
在Ollama官网库[https://www.ollama.com/library/] 可以选择要使用的模型

671b就是通过deepseek官网能够体验上的最强模型,这里推荐使用70b和32b的模型,这两个模型的效果足够满足日常需求了
2、下载DeepSeek大语言模型
ollama run deepseek-r1:32b
ollama list
查看已经下载好的模型
ollama run deepseek-r1:32b
运行模型
三、利用Chatbox可视化
1、Chatbox下载
Chatbox中文官网地址:https://www.chatboxai.app/zh
Chatbox官方GitHub下载网址:https://github.com/Bin-Huang/chatbox/releases
Chatbox网页版:https://web.chatboxai.app

2、配置模型
(1)打开Chatbox软件
(2)点左下角齿轮图标(设置)
(3)点击「模型提供方」下接菜单,这里选择「Ollama」
(4)在「API域名」框中,自动填充了http://localhost:11434,如果没有自动填充,或者还安装了其他模型,请手动填充。
(5)选择模型,在「模型」下拉菜单中,选择 deepseek-r1:1.5b,根据自己运行的模型选择。
(6)其他「显示」「对话」「其他」选项,保持默认就可以了,根据情况修改,最后点击「保存」。
3、使用DeepSeek可视化界面

4、上传私有知识库
方法二
一、安装前端工具AnythingLLM
1、AnythingLLM官网下载
下载地址:https://anythingllm.com/desktop
选择适合自己操作系统的版本

2、安装AnythingLLM


二、安装大语言模型
1、选择Ollama
这里选择Ollama并且选择 deepseek-r1:1.5B,这里选择已经安装的模型



2、配置工作区

3、配置完成

四、上传私有知识库
1、点击上传按钮


2、上传智库文件

3、移动到工作区

4、嵌入大模型


5、固定到工作区


6、效果对比
①未上传私有知识库的回答

②上传私有知识库的回答


6488

被折叠的 条评论
为什么被折叠?



