本地部署Deepseek R1大模型:从零开始的完整指南

img

img

img

本地部署Deepseek R1大模型:从零开始的完整指南

img

img

img

img

01

硬件配置清单

2025

注意:

参数规模(B = Billion/十亿)代表模型的复杂度和学习能力,参数越多,通常理解和生成能力越强。(按模型参数规模排序)

img

20

25

02

关键配置说明

2025

1.显存优化技巧

70B以下模型:支持8-bit量化(显存需求降低40%)千亿级模型:需结合模型并行+显存卸载技术

推荐使用DeepSeek官方优化的推理框架(显存占用减少20%)

2.硬盘扩展建议

预留2倍模型体积空间(缓存/日志文件)

推荐NVMe SSD(加载速度提升3-5倍)

20

25

03

场景应用推荐

2025

img

20

25

04

部署步骤

2025

**1、下载 Ollama,官网:**https://ollama.com

img

img

下载之后, Windows 版直接点击安装即可。

Win+r打开命令行终端,输入 ollama -v 测试一下,显示出对应版本,表示没问题。

2、安装 DeepSeek-R1 模型

在 Ollama 官网的「Models」导航处,搜索「deepseek」。

img

点进去,可以看到有多个不同的模型,1.5b、7b、8b 等等。

这个 b 代表什么意思呢?

b 是 billion 首字母,十亿的意思。

代表的是参数的数量规模,越大,模型能够处理的任务越复杂。

img

不过下载哪一个,要根据自己的电脑配置来。1.5b 是最小模型,大部分电脑都没有问题,可以带得动。7b 版本,8G 的内存,配上 4G 的显卡,是可以的。所以 7b 的版本,大部分电脑也都能支持。电脑配置更高的,选更大的模型即可。将模型旁边对应的指令复制下来,也就是 「ollama run deepseek-r1」,粘贴到终端命令行里。

粘贴到终端的时候,后面会自动带上参数规模,比如 「deepseek-r1:7b」,我这里是 「deepseek-r1:1.5b」。

回车,等待下载成功。看到 success,这就是下载好了。

**
**

3、和 DeepSeek 对话

模型下载好后,在终端里就可以和 deepseek 进行对话了。

img

到这一步,已经成功了,可以正常使用了。如果觉得不够直观,可以安装个直观一点的客户端,AnythingLLM、ChatBox、Cherry Studio 等都可以。

20

25

05

安装客户端(AnythingLLM**)**

2025

1、下载并安装AnythingLLM,根据您的操作系统选择相应的版本。(当前支持MacOS、Linux和Windows多个系统版本)

AnythingLLM官网:https://anythingllm.com/desktop

img

img

2、点击开始,选择Ollama

img

img

img

img

img

img

现在基本可以使用了,这个工具还有很多功能!

零基础入门AI大模型

今天贴心为大家准备好了一系列AI大模型资源,包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

有需要的小伙伴,可以点击下方链接免费领取【保证100%免费

点击领取 《AI大模型&人工智能&入门进阶学习资源包》

1.学习路线图

在这里插入图片描述

第一阶段: 从大模型系统设计入手,讲解大模型的主要方法;

第二阶段: 在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用;

第三阶段: 大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统;

第四阶段: 大模型知识库应用开发以LangChain框架为例,构建物流行业咨询智能问答系统;

第五阶段: 大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型;

第六阶段: 以SD多模态大模型为主,搭建了文生图小程序案例;

第七阶段: 以大模型平台应用与开发为主,通过星火大模型,文心大模型等成熟大模型构建大模型行业应用。

2.视频教程

网上虽然也有很多的学习资源,但基本上都残缺不全的,这是我自己整理的大模型视频教程,上面路线图的每一个知识点,我都有配套的视频讲解。

在这里插入图片描述

在这里插入图片描述

(都打包成一块的了,不能一一展开,总共300多集)

3.技术文档和电子书

这里主要整理了大模型相关PDF书籍、行业报告、文档,有几百本,都是目前行业最新的。
在这里插入图片描述

4.LLM面试题和面经合集

这里主要整理了行业目前最新的大模型面试题和各种大厂offer面经合集。
在这里插入图片描述

👉学会后的收获:👈

• 基于大模型全栈工程实现(前端、后端、产品经理、设计、数据分析等),通过这门课可获得不同能力;

• 能够利用大模型解决相关实际项目需求: 大数据时代,越来越多的企业和机构需要处理海量数据,利用大模型技术可以更好地处理这些数据,提高数据分析和决策的准确性。因此,掌握大模型应用开发技能,可以让程序员更好地应对实际项目需求;

• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;

• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。

1.AI大模型学习路线图
2.100套AI大模型商业化落地方案
3.100集大模型视频教程
4.200本大模型PDF书籍
5.LLM面试题合集
6.AI产品经理资源合集

5.免费获取

这份完整版的大模型 AI 学习资料已经上传优快云,朋友们如果需要可以微信扫描下方优快云官方认证二维码或者点击以下链接都可以免费领取【保证100%免费】

点击领取 《AI大模型&人工智能&入门进阶学习资源包》

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值