当前位置: 首页 > news >正文

docker利用ollama +Open WebGUI在本地搭建部署一套Deepseek-r1模型

系统:没有限制,可以运行docker就行
磁盘空间:至少预留50GB;
内存:8GB
docker版本:4.38.0 桌面版

下载ollama镜像

由于docker镜像地址,网络不太稳定,建议科学上网的一台服务器拉取ollama镜像:

docker pull ollama/ollama
docker images

在这里插入图片描述

创建并运行ollama容器

说明:本机为了测试只需要CPU的支持下进行安装运行ollama;如果是GPU,请参考ollama官网文档。

#CPU only
docker run -d -v ollama:/root/.ollama -p 11434:11434 --name ollama ollama/ollama
docker ps -a #查看运行的容器

在这里插入图片描述

测试访问ollama

http://127.0.0.1:11434
在这里插入图片描述

下载运行deepseek-r1模型

运行模型前首先要到https://ollama.com/library/选择自己要加载的模型(上面有各种模型:deepseek-r1,llama3.1,gemma2,qwen2.5,等等),我们在这选择现在最火的国产大模型deepseek-r1。
在这里插入图片描述
在这里插入图片描述

docker exec -it ollama  ollama run deepseek-r1:1.5b

在这里插入图片描述
在这里插入图片描述

docker安装Open WebGUI

Open WebGUI是一个用于与机器学习模型交互的Web界面。

如果本机已经安装ollama,使用如下命令创建运行open-webgui容器:

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

打开浏览器,访问http://localhost:3000在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
ps:机器比较旧了,没办法,先跑着吧。在这里插入图片描述

相关文章:

  • 【UE5 PuerTS笔记】PuerTS安装
  • GetX 路由管理详解
  • 【USTC 计算机网络】第二章:应用层 - DNS
  • WebSocket 中的条件竞争漏洞 -- UTCTF Chat
  • 掌握XXL-JOB:快速搭建高效任务调度系统
  • 【Linux】基于阻塞队列和循环队列的生产者消费者模型
  • 深入理解 TypeScript 中的迭代器(Iterators)与生成器(Generators)
  • 使用Java爬虫根据关键词获取Shopee商品列表?
  • Matrix-breakout-2-morpheus靶机实战攻略
  • Dify - 配置 vllm 模型
  • MySQL数据库入门到大蛇尚硅谷宋红康老师笔记 高级篇 part 9
  • 校园论坛系统Selenium自动化测试
  • 程序化广告行业(28/89):基于用户旅程的广告策略解析
  • 差分 异或
  • 网络编程之客户端聊天(服务器加客户端共三种方式)
  • 智能家居安全革命:代理IP如何守护物联网世界
  • Elasticsearch:使用 ColPali 进行复杂文档搜索 - 第 1 部分 - 8.18
  • 穿越禁区:前端跨域通信的艺术与实践
  • Deployment声明式更新与应用式更新对比
  • Weblogic未授权远程命令执行漏洞复现
  • 重庆市大渡口区区长黄红已任九龙坡区政协党组书记
  • 网红“丢那猩”丢石块闯祸,起哄游客难逃责任
  • 美伊谈判因“后勤原因”推迟,伊朗:视美国做法再定谈判日期
  • 旅游特种兵们,这个五一“躲进”书吧
  • 微博:严厉打击对肖某董某事件蹭炒热点、编造故事博流量等行为
  • 马上评|启动最高层级医政调查,维护医学一方净土