当前位置: 首页 > news >正文

docker利用ollama +Open WebGUI在本地搭建部署一套Deepseek-r1模型

系统:没有限制,可以运行docker就行
磁盘空间:至少预留50GB;
内存:8GB
docker版本:4.38.0 桌面版

下载ollama镜像

由于docker镜像地址,网络不太稳定,建议科学上网的一台服务器拉取ollama镜像:

docker pull ollama/ollama
docker images

在这里插入图片描述

创建并运行ollama容器

说明:本机为了测试只需要CPU的支持下进行安装运行ollama;如果是GPU,请参考ollama官网文档。

#CPU only
docker run -d -v ollama:/root/.ollama -p 11434:11434 --name ollama ollama/ollama
docker ps -a #查看运行的容器

在这里插入图片描述

测试访问ollama

http://127.0.0.1:11434
在这里插入图片描述

下载运行deepseek-r1模型

运行模型前首先要到https://ollama.com/library/选择自己要加载的模型(上面有各种模型:deepseek-r1,llama3.1,gemma2,qwen2.5,等等),我们在这选择现在最火的国产大模型deepseek-r1。
在这里插入图片描述
在这里插入图片描述

docker exec -it ollama  ollama run deepseek-r1:1.5b

在这里插入图片描述
在这里插入图片描述

docker安装Open WebGUI

Open WebGUI是一个用于与机器学习模型交互的Web界面。

如果本机已经安装ollama,使用如下命令创建运行open-webgui容器:

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

打开浏览器,访问http://localhost:3000在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
ps:机器比较旧了,没办法,先跑着吧。在这里插入图片描述

http://www.dtcms.com/a/78027.html

相关文章:

  • 【UE5 PuerTS笔记】PuerTS安装
  • GetX 路由管理详解
  • 【USTC 计算机网络】第二章:应用层 - DNS
  • WebSocket 中的条件竞争漏洞 -- UTCTF Chat
  • 掌握XXL-JOB:快速搭建高效任务调度系统
  • 【Linux】基于阻塞队列和循环队列的生产者消费者模型
  • 深入理解 TypeScript 中的迭代器(Iterators)与生成器(Generators)
  • 使用Java爬虫根据关键词获取Shopee商品列表?
  • Matrix-breakout-2-morpheus靶机实战攻略
  • Dify - 配置 vllm 模型
  • MySQL数据库入门到大蛇尚硅谷宋红康老师笔记 高级篇 part 9
  • 校园论坛系统Selenium自动化测试
  • 程序化广告行业(28/89):基于用户旅程的广告策略解析
  • 差分 异或
  • 网络编程之客户端聊天(服务器加客户端共三种方式)
  • 智能家居安全革命:代理IP如何守护物联网世界
  • Elasticsearch:使用 ColPali 进行复杂文档搜索 - 第 1 部分 - 8.18
  • 穿越禁区:前端跨域通信的艺术与实践
  • Deployment声明式更新与应用式更新对比
  • Weblogic未授权远程命令执行漏洞复现
  • string(1):
  • 基于pycatia的CATIA装配体STP批量导出技术解析与优化指南
  • 分治-快速排序系列一>快速排序
  • VMWare:解决Linux虚拟机找不到共享文件夹
  • Java单元测试、Junit、断言、单元测试常见注解、单元测试Maven依赖范围、Maven常见问题解决方法
  • ubuntu高并发内核参数调优 - (压测客户端调优)
  • 【面试场景题-Redis中String类型和map类型的区别】
  • 蓝桥杯练习day2:执行操作后的变化量
  • 如何判断 MSF 的 Payload 是 Staged 还是 Stageless(含 Meterpreter 与普通 Shell 对比)
  • MySQL:数据库基础