Windows搭建Docker+Ollama+Open-WebUI部署DeepSeek本地模型

CPUOS2010

已于 2025-01-29 23:30:20 修改

阅读量5.9k

点赞数 7

分类专栏： AI大模型文章标签： windows docker 容器 AI编程

于 2025-01-29 23:27:57 首次发布

本文链接：https://blog.youkuaiyun.com/CPUOS2010/article/details/145396003

版权

AI大模型专栏收录该内容

1 篇文章

订阅专栏

Windows搭建Docker+Ollama+Open-WebUI部署DeepSeek本地模型

本文将详细介绍如何在 Windows 系统 上安装和使用 Docker+Ollama + Open-WebUI，这三个强大的工具将帮助您轻松管理和运行大型语言模型DeepSeek。Ollama 简化了模型的下载与部署，而 Open-WebUI 则提供了一个直观的图形用户界面，使用户能够更方便地与模型进行交互。

步骤 1：安装 Docker

（1）下载 Docker Desktop

访问 Docker 官方网站。
点击“Download for Windows”按钮，下载 Docker Desktop 安装程序。

（2）安装 Docker Desktop

双击下载的安装程序，按照提示完成安装。
安装完成后，启动 Docker Desktop。

（3）启用 WSL 2 后端(可选)

如果你使用的是 Windows 10 或更高版本，建议启用 WSL 2 后端以提高性能。

打开 Docker Desktop，进入“Settings” -> “General”，勾选“Use the WSL 2 based engine”。
进入“Resources” -> “WSL Integration”，启用你的 WSL 发行版。

（4）验证 Docker 安装

打开命令提示符或 PowerShell，输入以下命令：

docker --version

步骤 2：安装 Ollama

（1）下载 Ollama

访问 Ollama 官方网站或 GitHub 仓库，下载适用于 Windows 的 Ollama 安装程序。
按照提示完成安装。

（2）验证 Ollama 安装

打开命令提示符或 PowerShell，输入以下命令：

ollama --version

如果显示 Ollama 版本信息，说明安装成功。

（3）下载 DeepSeek-V3 模型

在CMD命令提示符使用以下命令下载 DeepSeek-V3 模型：

ollama run deepseek-v3

等待模型下载完成。

在这里插入图片描述

（4）验证模型是否可用

使用以下命令测试模型：

ollama run deepseek-v3 "你好，DeepSeek-V3！"

如果模型返回响应，说明模型加载成功。

步骤 3：安装 Open WebUI

（1）拉取 Open WebUI Docker 镜像

Open WebUI 是一个用于与大模型交互的 Web 界面。使用以下命令拉取 Open WebUI 镜像：

docker pull ghcr.io/open-webui/open-webui:main

（2）运行 Open WebUI 容器

使用以下命令启动 Open WebUI 容器，并连接到 Ollama：

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

解释：

-d：后台运行容器。
-p 3000:8080：将容器的 8080 端口映射到主机的 3000 端口。
--add-host=host.docker.internal:host-gateway：添加主机映射，使容器能够访问主机服务。
-v open-webui:/app/backend/data：将 Open WebUI 的数据目录挂载到 Docker 卷 open-webui。
--name open-webui：为容器命名。
--restart always：设置容器始终自动重启。
ghcr.io/open-webui/open-webui:main：使用的 Docker 镜像。

（3）验证 Open WebUI 是否运行

打开浏览器，访问 http://localhost:3000。如果看到 Open WebUI 的登录界面，说明运行成功。

http://localhost:3000

在这里插入图片描述

步骤 4：通过 Open WebUI 使用 DeepSeek-V3 大模型

（1）登录 Open WebUI

首次访问 Open WebUI 时，需要创建一个账户。

输入用户名和密码，完成注册并登录。

（2）连接到 Ollama

在 Open WebUI 界面中，进入设置页面。

在“Ollama API URL”字段中输入 http://host.docker.internal:11434，然后保存设置。

（3）选择 DeepSeek-V3 模型

在 Open WebUI 界面中，找到模型选择菜单。

选择 DeepSeek-V3 作为当前使用的模型。

（4）与模型交互

在输入框中输入问题或指令，例如：

你好，DeepSeek-V3！你能帮我写一段代码吗？

点击“发送”按钮，等待模型生成回复。

步骤 5：停止和删除容器

（1）停止容器

如果需要停止容器，可以使用以下命令：

docker stop open-webui

（2）删除容器

如果需要删除容器，可以使用以下命令：

docker rm open-webui