当前位置: 首页 > news >正文

Docker 部署 Ollama 详细教程以及镜像高速下载地址

目录

1. 安装 Docker

2. 拉取 Ollama 镜像

3. 运行 Ollama 容器

4. 拉取并运行模型

5. 通过 API 访问(可选)

6. 停止和重启容器

注意事项

镜像高速下载地址


使用 Docker 部署 Ollama 是一种简单高效的方式,以下是详细步骤:

1. 安装 Docker

首先确保你的系统已安装 Docker。如果未安装,可以参考官方文档:

  • Docker 安装指南

2. 拉取 Ollama 镜像

Ollama 官方提供了 Docker 镜像,使用以下命令拉取:

bash

docker pull ollama/ollama

3. 运行 Ollama 容器

使用以下命令启动 Ollama 容器,需要映射端口并挂载数据卷以持久化模型数据:

bash

docker run -d \--name ollama \-p 11434:11434 \-v ollama_data:/root/.ollama \--restart always \ollama/ollama

参数说明:

  • -d:后台运行容器
  • --name ollama:指定容器名称为 ollama
  • -p 11434:11434:将容器的 11434 端口映射到主机的 11434 端口(Ollama 默认端口)
  • -v ollama_data:/root/.ollama:创建数据卷持久化存储模型
  • --restart always:容器退出时自动重启

4. 拉取并运行模型

容器启动后,使用以下命令进入容器内部操作:

bash

docker exec -it ollama bash

在容器内拉取并运行模型(以 llama3 为例):

bash

ollama pull llama3
ollama run llama3

5. 通过 API 访问(可选)

如果需要通过 API 访问 Ollama,可以使用 HTTP 请求:

bash

curl http://localhost:11434/api/generate -d '{"model": "llama3","prompt": "Hello! What is Docker?"
}'

6. 停止和重启容器

  • 停止容器:docker stop ollama
  • 启动容器:docker start ollama
  • 查看容器状态:docker ps -a | grep ollama

注意事项

  • 如果需要使用 GPU 加速,需要安装 NVIDIA Docker 支持,并使用带有 GPU 的镜像
  • 不同模型对系统资源要求不同,确保你的服务器有足够的内存和 CPU/GPU 资源
  • 防火墙需要开放 11434 端口(如果需要远程访问)

通过以上步骤,你可以快速在 Docker 中部署和使用 Ollama,管理各种大语言模型。

镜像高速下载地址

镜像将近3个G,没关系,我会出手,已经准备好了高速下载资源

https://pan.quark.cn/s/3f2a66e49a89?pwd=GC1u

我用夸克网盘给你分享了「ollama高速下载镜像」,点击链接或复制整段内容,打开「夸克APP」即可获取。
/~e8eb38Ptt0~:/
链接:https://pan.quark.cn/s/3f2a66e49a89?pwd=GC1u
提取码:GC1u

http://www.dtcms.com/a/403593.html

相关文章:

  • Rust数组与向量
  • 【LeetCode 每日一题】1886. 判断矩阵经轮转后是否一致
  • linux下进程coredump分析
  • 【数据结构学习篇】--栈和stack
  • 钻研视频——破细节
  • 网站建设哪家某网站项目策划书
  • 网站建设制作设计公司佛山内蒙网站建设赫伟创意星空科技
  • 上海网站seo策划设计工具
  • 声明式事务6
  • 南京建设网站公司做车品的网站
  • Next.js动态路由介绍([projectId]/page.tsx:动态路由参数、参数占位符、动态参数、动态数据)无需预创建目录、共享页面逻辑
  • Java核心之泛型
  • 直播进入“智”时代!智享 AI 驱动个性化内容,升级高效互动场景
  • 河南襄县做网站的公司查企业官网
  • Linux:fork()函数详解:原理、用法及经典面试题解析
  • tensorflow卷积层1——卷积和池化
  • tensorflow加载和预处理数据
  • DAY 03 CSS的认识
  • 黑群晖做php网站pc网站手机网站
  • Jakarta EE 实验 — Web 聊天室(过滤器、监听器版)
  • 做js题目的网站知乎抖音代运营公司合法吗
  • MyBatis的最佳搭档(MyBatis-Plus)
  • 无用知识研究:和普通函数不同,返回类型也参与了模板函数的signature
  • 简单小结类与对象
  • Java 大视界 -- Java 大数据机器学习模型在金融风险传染路径分析与防控策略制定中的应用
  • 【C++】Template:深入理解特化与分离编译,破解编译难题
  • 【把15v方波转为±7.5v的方波】2022-12-21
  • 自己可以做一个网站吗自己怎么做直播网站吗
  • 嵌入式开发常见问题解决:Keil头文件路径与MCUXpresso外设配置错误
  • 从Android到iOS:启动监控实现的跨平台技术对比