1小时教会你本地搭建免费个人AI知识库,大模型入门到精通,收藏这篇就足够了!

利用AI大模型构建本地知识库 维度传统知识库具有AI的知识库数据存储方式结构化数据为主(表格、文档),依赖手动分类和标签支持非结构化数据(文本、图片、音视频),利用嵌入技术(Embedding)自动编码为向量存储检索机制基于关键词匹配或固定规则(如SQL查询)支持语义搜索,通过向量相似度匹配理解用户意图(如“性价比高的手机”≈“低价高性能手机”)交互方式用户需输入精确关键词,返回静态结果支持自然语言对话(如提问“如何解决打印机卡纸?”),生成动态答案或分步骤指导知识更新依赖人工录入和定期维护,更新滞后。 阅读详情
AI摘要

本文详细介绍如何在本地部署个人AI知识库,基于Ollama和AnythingLLM实现大模型与私有文档的结合。涵盖环境安装、模型集成、中文设置、数据上传及向量化处理等关键步骤,并提供嵌入模型优化建议。所有数据均保留在本地,保障隐私安全,适合开发者构建专属智能问答系统。

为什么要搭建本地知识库?

难道你就不想拥有一个超级能干的AI助理管家吗?就像是贾维斯一样的助手!

那么DeepSeek的特点就是擅长理解中文,这一点比很多外国AI强大很多!

那么我们就可以把自己的工作文件、个人日记、文档笔记交给它去处理,DeepSeek能快速吃透你给的各种文档, 最关键是能装在自己电脑上,我们不用担心隐私泄露!

你要是使用公共AI处理就像把钥匙交给陌生人一样不放心,而DeepSeek就像把保险箱安在自己家!

那废话不多说,我们直接上手实操看效果吧~~

Ollama下载与安装

首先我们电脑上必须要安装Ollama并且加载一个DeepSeek模型,这个教程我们在前面也已经详细讲过了

为了方便新手,这里再给大家讲解一下~

打开Ollama官网:

https://www.ollama.com

如图

这里下载Windows版本

如图

下载好直接点击安装包开始安装即可~

如图

稍等一会~~

如图

注意:安装完成之后,重启一下电脑

然后我们确认一下是否安装成功!

打开cmd命令行,输入以下命令!

ollama -v

看到以下提示,才能算你安装ollama安装成功!

如图

Ollama集成DeepSeek-R1模型

然后我们开始下载DeepSeek-R1模型

还是打开Ollama官网, 点击DeepSeek-R1链接

如图

然后根据你电脑的硬件配置情况来选择蒸馏模型的安装命令!

如图

特别提醒:

这里就不要鬼扯什么满血和蒸馏的问题了,在前面的教程中,都说得很清楚了~还在找这种存在感的人应该考虑转行了

然后点击相应的安装命令,复制一下,到cmd命令行,就可以直接开始安装DeepSeek-R1

如图

完成之后,就可以直接对话了!

如图

AnythingLLM介绍

这其实也是我们今天要说的重点~~

AnythingLLM是由Mintplex Labs Inc.开发的一款全栈应用程序,是为用户提供一个灵活而强大的工具,以便在私有环境中构建自己的ChatGPT

特点

文档转化与上下文使用

AnythingLLM能够将任何文档、资源类似于链接、音频、视频、内容片段转化为上下文,然后让其他大语言模型在聊天时作为参考进行调用!

所以AnythingLLM可以用来打造企业内部知识库的私人专属GPT,用于智能处理各种文档并进行对话!

想象一下,你有一个装满各种文档、笔记和资料的私人宝库,而AnythingLLM就是那个能帮你智能检索、理解和对话的宝库管理员, 你可以把任何文档转化成它能理解的形式,然后像聊天一样提问,它会根据你的问题从宝库中提取相关信息来回答。

这样,你就能快速、方便地获取所需知识,而且所有数据都保存在你自己的电脑上安全又私密岂不乐哉!

来吧~~开始下载安装它!

AnythingLLM下载与安装

官方网站

https://anythingllm.com

如图

这里以Windows系统为例

如图

要是弹出以下这玩意,点击确认即可开始下载!

如图

同样,下载好之后,直接安装即可

如图

等待安装…这玩意还有点大可能需要多等待一会

如图

AnythingLLM部署配置本地知识库

整个过程非常简单只需几步即可完成!

首先双击桌面上的AnythingLLM快捷方式打开它, 点击Get Started(开始)

如图

然后在列表中找到Ollama, 同时在下方的Ollama Model选项中选择我们安装的DeepSeek-R1蒸馏模型!

注意:根据你安装的模型参数类别来进行选择!

如图

这里直接默认点击下一步即可

如图

以下可以输入一个电子邮箱,也可以直接点击跳过

这里我直接Skip Survey(跳过)

如图

然后是给工作区命名,继续点击下一步!

如图

到这里基本上就完成了模型的部署,可以和DeepSeek-R1进行对话了,类似于Chatbox

如图

设置中文

但是这里你会发现会显示一些英文,我们需要做一些设置!

点击设置按钮!

如图

找到语言设置选项,选择Chinese(中文)

如图

现在回过头看看是不是变成中文了

如图

上传数据到本地资料库

接下来才是重头戏,把你的数据投喂到AnythingLLM让它使用DeepSeek给我们进行分析!

首先点击工作区右侧旁边的齿轮设置按钮, 按照图中的顺序进行配置!

如图

滚轮啦到底部,点击Update workspace(保存更新)

如图

然后继续在工作区右侧点击上传按钮

如图

左边是我们上传的所有数据资料,默认为空

如图

我们可以先把一些文件拖进软件,等它自动分析,这里至于是什么文件,就取决于你自己的职业

举个栗子

这里我上传一份ThinkPHP5快速入门教程的PDF文件给AnythingLLM

我们点击click to upload or drag and drop(单击上传或拖放按钮) 选择你要上传的文件!

等待一会,上传完成之后继续点击Move to Workspace(移动到工作区)

如图

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

接着点击保存嵌入(Save and Embed)

如图

然后会进入到等待分析状态~~~

如图

加载完成之后,在工作区列表中,把上传文件的图钉点选上

如图

完成部署

最后你就可以开始用自然语言进行提问了,我们就来询问一下刚刚上传的文档

让AnythingLLM + DeepSeek来分析和理解,并最终给出结果!

如图

怎么样现在你的电脑就相当于一个真正的智能管家了~ 随时待命

像我们这种开发者,设计师就需要经常查文档的场景需求下,特别有用!

当然文档你可以上传很多,反正都是上传到自己电脑上,又不怕别人拿走!

本地部署AI知识库注意事项

文档类型准备

不知道你们有没有注意到一个问题,就是大家部署了本地知识库之后,可能会有回答问题不准确的情况!

首先大家要明白不是所有的文档类型都可以拖拽到知识库里面去投喂的!

特别提醒

扫描文档生成的纯图片PDF文件,这种文件你拖拽到知识库中可能就会造成无法识别的情况!

我个人建议最好拖入纯文本的形式的文件到知识库,并且是结构化清晰的纯文本格式的文件,这样拖拽到知识库中方便AI识别率会提高!

实在是想拖入这种图片扫描的PDF文件,那你就要提前先处理一下,把内容提取出来再说!

嵌入模型配置

这里简单的解释一下,嵌入模型确实可以被用来将文本信息转换为向量,从而实现内容匹配。

使用嵌入模型将知识库中的文字、文章等文本内容转换为向量表示,然后当我们查询时,也可以将查询内容转换为向量,并在向量空间中计算查询向量与知识库中`向量之间的相似度,从而找到最相关的内容

至于向量这玩意你可以把它想象成一个有方向、有大小的箭头,在数学和计算机里,它就是一串数字,能帮我们表示和计算很多东西,比如位置、速度、力这些,简单的说就是这样一个原理!

当然这里的AnythingLLM给我们默认设置了嵌入模型AnythingLLM Embedder 选项

如图

我们也可以通过Ollama命令在cmd命令行中安装其他嵌入模型

例如

ollama run nomic-embed-textollama run bge-m3

首先保证Ollama启动的状态之下,打开cmd命令行执行上面的命令,然后稍稍等待…

如图

然后我们再次进入到Embedder选项中的嵌入引擎设置,先选择一下Ollama

如图

然后你会看到刚刚下载好的嵌入模型选项,选择一个自己合适文档处理的嵌入模型即可!

如图

最后

本地部署虽然爽,但对你的电脑硬件资源能不能带得动是有一定要求的!

当然如果你看到这里说明也成功运用DeepSeek+Ollama+AnythingLLM搭建起了一个功能全面的本地知识库了吧!

这不仅高效检索信息,还能智能理解和回应查询,展现了技术整合的强大力量,极大地提升了知识管理与利用的效率, 简直不要太方便~ 赶紧马上去试试看吧~

想入门 AI 大模型却找不到清晰方向?备考大厂 AI 岗还在四处搜集零散资料?别再浪费时间啦!2025 年 AI 大模型全套学习资料已整理完毕,从学习路线到面试真题,从工具教程到行业报告,一站式覆盖你的所有需求,现在全部免费分享!

👇👇扫码免费领取全部内容👇👇

​

一、学习必备:100+本大模型电子书+26 份行业报告 + 600+ 套技术PPT,帮你看透 AI 趋势

想了解大模型的行业动态、商业落地案例?大模型电子书?这份资料帮你站在 “行业高度” 学 AI:

1. 100+本大模型方向电子书

在这里插入图片描述

2. 26 份行业研究报告:覆盖多领域实践与趋势

报告包含阿里、DeepSeek 等权威机构发布的核心内容,涵盖:

  • 职业趋势:《AI + 职业趋势报告》《中国 AI 人才粮仓模型解析》;
  • 商业落地:《生成式 AI 商业落地白皮书》《AI Agent 应用落地技术白皮书》;
  • 领域细分:《AGI 在金融领域的应用报告》《AI GC 实践案例集》;
  • 行业监测:《2024 年中国大模型季度监测报告》《2025 年中国技术市场发展趋势》。

3. 600+套技术大会 PPT:听行业大咖讲实战

PPT 整理自 2024-2025 年热门技术大会,包含百度、腾讯、字节等企业的一线实践:

在这里插入图片描述

  • 安全方向:《端侧大模型的安全建设》《大模型驱动安全升级(腾讯代码安全实践)》;
  • 产品与创新:《大模型产品如何创新与创收》《AI 时代的新范式:构建 AI 产品》;
  • 多模态与 Agent:《Step-Video 开源模型(视频生成进展)》《Agentic RAG 的现在与未来》;
  • 工程落地:《从原型到生产:AgentOps 加速字节 AI 应用落地》《智能代码助手 CodeFuse 的架构设计》。

二、求职必看:大厂 AI 岗面试 “弹药库”,300 + 真题 + 107 道面经直接抱走

想冲字节、腾讯、阿里、蔚来等大厂 AI 岗?这份面试资料帮你提前 “押题”,拒绝临场慌!

1. 107 道大厂面经:覆盖 Prompt、RAG、大模型应用工程师等热门岗位

面经整理自 2021-2025 年真实面试场景,包含 TPlink、字节、腾讯、蔚来、虾皮、中兴、科大讯飞、京东等企业的高频考题,每道题都附带思路解析:

2. 102 道 AI 大模型真题:直击大模型核心考点

针对大模型专属考题,从概念到实践全面覆盖,帮你理清底层逻辑:

3. 97 道 LLMs 真题:聚焦大型语言模型高频问题

专门拆解 LLMs 的核心痛点与解决方案,比如让很多人头疼的 “复读机问题”:


三、路线必明: AI 大模型学习路线图,1 张图理清核心内容

刚接触 AI 大模型,不知道该从哪学起?这份「AI大模型 学习路线图」直接帮你划重点,不用再盲目摸索!

在这里插入图片描述

路线图涵盖 5 大核心板块,从基础到进阶层层递进:一步步带你从入门到进阶,从理论到实战。

img

L1阶段:启航篇丨极速破界AI新时代

L1阶段:了解大模型的基础知识,以及大模型在各个行业的应用和分析,学习理解大模型的核心原理、关键技术以及大模型应用场景。

img

L2阶段:攻坚篇丨RAG开发实战工坊

L2阶段:AI大模型RAG应用开发工程,主要学习RAG检索增强生成:包括Naive RAG、Advanced-RAG以及RAG性能评估,还有GraphRAG在内的多个RAG热门项目的分析。

img

L3阶段:跃迁篇丨Agent智能体架构设计

L3阶段:大模型Agent应用架构进阶实现,主要学习LangChain、 LIamaIndex框架,也会学习到AutoGPT、 MetaGPT等多Agent系统,打造Agent智能体。

img

L4阶段:精进篇丨模型微调与私有化部署

L4阶段:大模型的微调和私有化部署,更加深入的探讨Transformer架构,学习大模型的微调技术,利用DeepSpeed、Lamam Factory等工具快速进行模型微调,并通过Ollama、vLLM等推理部署框架,实现模型的快速部署。

img

L5阶段:专题集丨特训篇 【录播课】

img
四、资料领取:全套内容免费抱走,学 AI 不用再找第二份

不管你是 0 基础想入门 AI 大模型,还是有基础想冲刺大厂、了解行业趋势,这份资料都能满足你!
现在只需按照提示操作,就能免费领取:

👇👇扫码免费领取全部内容👇👇

​

2025 年想抓住 AI 大模型的风口?别犹豫,这份免费资料就是你的 “起跑线”!

【AI+本地知识库】个人整理的几种常见本地知识库技术方案 个人整理的几种常见本地知识库技术方案,MaxKB,AnythingLLM,Langchain-Chatchat等 阅读详情

相关推荐

如何本地部署开源AI知识库 FastGPT(新手教程)

Win10WSL2。

本博客,博文仅代表个人操作经验,不能完全解决你的问题,仅供参考,佛系回复。 3690

只需三步,本地打造自己的AI个人专属知识库

只需三步,本地打造自己的AI个人专属知识库

AAI666666的博客 4万+

OpenLayers源码解析1 Map.js

Map.js 父类:./PluggableMap/PluggableMap 引用:5个模块 ./renderer/Composite.js ./PluggableMap.js ./obj.js ./control.js(控件) ./interaction.js(交互) 主要功能:核心组件,渲染地图 必要参数: view layers target controls和interactions要是未指定,使用默认值 方法:createRenderer()? /** * @module ol/Map */ i

qq_45005996的博客 1898

本地Deepseek添加个人知识库(Page Assist/AnythingLLM)

两种建立知识库,投喂Deepseek的方法 本地Deepseek在Page Assist建立知识库 本地Deepseek在Page Assist建立知识库

jingzilideniu的博客 4万+

不用写触发器!帆软填报报表自动记录创建/修改时间的终极方案

本文详细介绍了帆软填报报表中无需编写数据库触发器,即可自动记录数据创建时间和修改时间的终极方案。该方案利用帆软内置函数和单元格条件属性,在应用层实现日期自动生成,有效规避了触发器带来的权限、维护和部署难题,为数据填报提供了更轻量、灵活且易于维护的解决方案。

weixin_28040125的博客 360

.NET适配HarmonyOS进展 1. 前言

目前国产化系统浪潮下,适配鸿蒙是中国软件大势所趋,.NET作为最适合开发客户端语言之一,适配鸿蒙系统(HarmonyOS Next)是目前.NET开发者最关心的事情。我目前业余时间正在移植Avalonia到HarmonyOS,去年在.NET Conf CN上分享过,目前又取得一点进展,所以本文把所有问题进行整合与大家进行分享。

2301_76476890的博客 1461

1小时教会你本地搭建免费个人AI知识库!

难道你就不想拥有一个超级能干的AI助理管家吗?就像是贾维斯一样的助手! 那么DeepSeek的特点就是擅长理解中文,这一点比很多外国AI强大很多! 那么我们就可以把自己的工作文件、个人日记、文档笔记交给它去处理,DeepSeek能快速吃透你给的各种文档, 最关键是能装在自己电脑上,我们不用担心隐私泄露! 你要是使用公共AI处理就像把钥匙交给陌生人一样不放心,而DeepSeek就像把保险箱安在自己家!

程序员鑫港的博客 1379

别再只会调速度了!用STM32的定时器中断精准控制伺服电机转角(避坑指南)

本文详细介绍了如何利用STM32的定时器中断和PWM输出实现伺服电机的精准转角控制,避免常见的速度控制误区。通过硬件配置、脉冲计数逻辑和优化技巧的实战讲解,帮助开发者掌握高精度位置控制方法,适用于工业自动化和机器人控制等场景。

weixin_42531163的博客 414

1小时教会你本地搭建免费个人AI知识库

你要是使用公共AI处理就像把钥匙交给陌生人一样不放心,而DeepSeek就像把保险箱安在自己家!

Y525698136的博客 1521

雷达工程师面试题目

详细描述项目背景、目标、你的具体职责和贡献,分析在项目实施过程中遇到的主要技术难题及解决方案,总结项目取得的成果和经验教训。

道亦无名 738

100天精通Python(基础篇)——第3天:运算符全解析(算术运算符、比较运算符、逻辑运算符、赋值运算符及其优先级规则)

100天精通Python(基础篇)——第3天:运算符全解析(算术运算符、比较运算符、逻辑运算符、赋值运算符及其优先级规则)

努力让自己发光,对的人才能迎着光而来 14万+

deepseek本地部署最简教程——搭建个人AI知识库

尽管本地化部署的DeepSeek模型在算力规模和功能完备性上无法媲美云端全量版本,但只要喂给它「独家秘方」——也就是你电脑里的文档、代码、笔记这些干货,它立马就能变身成你的专属知识小助手!当然,AnythingLLM还具备其他功能,如代码托管和官方API的接入等,受篇幅所限,本文不再展开论述,各位可自行探索。需要注意的是,本地部署的AI回答精准度仍然受到硬件性能的制约。建议开发者参考以下硬件选型策略,轻量级部署:RTX 3060(12GB)+32GB DDR4+1TB SSD(支持7B参数模型实时推理);

m0_59164304的博客 7477

2026年3月GESP真题及题解(C++七级):物流网络

2026年3月GESP真题及题解(C++七级):物流网络

王老师青少年编程 1124

太香了!手把手教你搭建DeepSeek本地知识库(深度好文)

在之前的文章中,我分享过教程无需配件要求,笔记本联网也能用满血版deepseek的R1模型:我们每天一睁眼,手机通知栏就挤满了未读消息,订阅的20个专业号更新了深度长文。电脑浏览器同时开着十几个标签页。从论文PDF到行业报告,从代码仓库到产品文档,像无数个亟待填补的知识黑洞。这让我想起小时候陪妈妈逛超市,她总念叨就买瓶酱油,结果推车塞满零食日用品。回家却发现忘了买酱油,我们现在何尝不是每天在知识的货架间迷失?

bagell的博客 7784

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

汉书HE8,好用的汇编代码编写工具

汉书HE8,好用的汇编代码编写工具早期编写汇编代码所用功能强大

零成本DIY个人AI助手!本地部署大模型+搭建知识库,小白也能轻松上手!

文章详细介绍了使用ollama、DeepSeek和CherryStudio在本地免费部署大模型并搭建知识库的完整方案。无需高端配置,普通电脑即可实现,保证本地资料安全性,解决AI理解意图不足的问题。通过图文并茂的步骤讲解,帮助读者打造专属AI助手,实现个性化知识库管理。

2401_84495872的博客 2414

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

让DeepSeek-R1当你的个人本地知识库!

什么是RAG?简单说就是给大模型配了个随身图书馆+过目不忘的学霸:你扔给它《资本论》,它能整出《00后整顿职场指南》;投喂三年财报,分分钟生成《如何优雅暗示老板加薪》;塞本《本草纲目》,说不定能开电子中药铺。(某网友上传《甄嬛传》剧本后,现在他的AI说话都是"本宫看这预算方案,倒不如剪秋的头饰体面")

h1453586413的博客 1717

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

个人知识库,建议你尽早搭建!

目前 ima 安卓 App“ima 知识库”已经正式上线,可以通过 ima 官网(ima.qq.com)和腾讯应用宝下载。iOS 版本也即将上线,敬请期待!作为一个已经深度使用 ima 的用户,我只想说:这就是我一直在寻找的知识管理工具!无论是个人学习还是团队协作,ima 都能让你的信息处理效率翻倍!别再让宝贵的知识散落各处了,赶紧用 ima 把它们整合起来,建立属于你的"第二大脑"吧!

2401_84204413的博客 1585

DeepSeek骚操作合集:从部署、开发到知识库搭建,大模型入门到精通,收藏这篇就足够了!

这篇指南就从模型部署、应用开发和开发提效三个方面,带大家全面了解 DeepSeek。

DEVELOPERAA的博客 1383

拖拽搭建AI应用!Dify保姆级教程,小白秒变AI工程师,大模型入门到精通,收藏这篇就足够了!

拖拽搭建AI应用!Dify保姆级教程,小白秒变AI工程师,大模型入门到精通,收藏这篇就足够了!

huang9604的博客 1293

30天高效掌握AI大模型的系统学习计划,大模型入门到精通,收藏这篇就足够了!

2024年OpenAI吹响“大模型主导未来变革”的号角,掌握AI大模型技术已成为职业发展的关键突破口。本计划融合学习理论与实战路径,助您30天内系统掌握大模型核心技术。

2301_81940605的博客 1442

用 AI 打造你的个人知识库(保姆级教程)非常详细收藏我这一篇就够

真心建议你,一定要借助 AI,打造你的个人知识库。个人知识库会帮助你提高学习和工作效率,是这篇文章快速搭建个人知识库、如何使用个人知识库。我会通俗易懂的描述,搭建知识库的第一步,是选择一个合适的工具。① 手机、电脑、网页都可以用。这样才方便你随时随地整理各类知识。② 使用优质的 AI 模型。AI 模型能力的上限,决定了知识库的上限,知识库最好用 DeepSeek 这种强大的模型。③ 最好是大公司的产品。因为知识库存储了你的大量知识,如果数据丢失,或者工具不维护了,会给你添很多麻烦。

2401_84495872的博客 6324

做好智能客服的大前提:知识库,大模型入门到精通,收藏这篇就足够了!

如果你还在纠结要不要做智能客服,其实第一步不是选 AI 模型,而是先问自己:我的知识库准备好了吗?

2401_82469710的博客 671
上一篇: 【LLaMA-Factory】3分钟上手:小白也能玩转大模型微调!(附代码)大模型入门到精通,收藏这篇就足够了!
下一篇: 17.1K star!两小时就能训练出专属于自己的个性化小模型,这个开源项目让AI触手可及!
Llama-Turbo
博客等级 码龄4年 9901粉丝 2021原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值