当前位置: 首页 > news >正文

Ollama部署离线大模型

注:本篇文章介绍如何高速下载大模型、大模型如何更改存储位置。

目录

  • 1.Ollama安装
  • 2.自定义模型安装位置
    • 2.1 Windows系统
    • 2.2 Mac系统
  • 3.AingDesk安装
  • 4.大模型安装
  • 5.测试与验证
    • 5.1 本地测试
    • 5.2 外网访问
  • 6.参考资料


1.Ollama安装

Ollama下载
官网下载
根据自己的电脑系统安装Windows/Mac的Arduino IDE软件。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2.自定义模型安装位置

2.1 Windows系统

1.右键点击【此电脑】->【属性】->【高级系统设置】->【环境变量】
2.新建系统变量:
变量名:OLLAMA_MODELS
变量值:D:\models(以实际电脑磁盘为准)
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
ollama参数
启动服务:ollama serve
停止:ollama stop
查看安装的模型: ollama list

2.2 Mac系统

迁移文件:
将.ollama目录移动到其他磁盘,磁盘名称xxxx,目录ollama_data。

mv ~/.ollama /Volumes/xxxx/ollama_data

创建软链接:

ln -s /Volumes/xxxx/ollama_data ~/.ollama

启动服务:

ollama serve

3.AingDesk安装

AingDesk
官网下载
根据自己的电脑系统选择Windows、Mac、Linux等。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

4.大模型安装

使用AingDesk安装大模型时,需要Ollama启动状态。
在这里插入图片描述
在这里插入图片描述
根据自己的电脑配置,选择所需的模型。
在这里插入图片描述

5.测试与验证

5.1 本地测试

以DeepSeek-r1:14b为例
在这里插入图片描述
在这里插入图片描述

5.2 外网访问

点击分享按钮,分享模型。

在这里插入图片描述
在这里插入图片描述

6.参考资料

[1]AingDesk 文档
[2]Ollama Models

相关文章:

  • 前端跨页面通信完全指南
  • 利用Python requests库爬虫程序示例
  • Spring IOC 容器加载过程
  • C++实现文件断点续传:原理剖析与实战指南
  • Tips:用proxy解决前后端分离项目中的跨域问题
  • 研发效率破局之道阅读总结(1)研发效能
  • Windows 图形显示驱动开发-WDDM 2.0功能_IoMmu 模型
  • 开源推荐#2:Social Auto Upload — 自动化上传视频到社交媒体
  • 已知Word内容格式固定,通过宏实现Word转Excel
  • 【区块链安全 | 第三十七篇】合约审计之获取私有数据(一)
  • 理解 DuckDB 的逻辑计划(Logical Plan)、优化器(Optimizer)和物理执行计划模块的工作流程
  • [Godot] C#简单实现人物的控制和动画
  • Spring MVC 逻辑视图(JSP、Thymeleaf、FreeMarker)与非逻辑视图(JSON、Excel、PDF、XML)详解及示例
  • 2025年AI生成引擎搜索发展现状与趋势总结​​
  • 【数学】线性代数(Python)
  • 水果成篮 -- 滑动窗口
  • Franka双臂机器人:多领域革新与核心技术深度解析
  • 数组划分使元素总和最接近
  • 如何迁移 GitHub 仓库到 GitLab?
  • 最新版PhpStorm超详细图文安装教程,带补丁包(2025最新版保姆级教程)
  • 多家外资看好中国市场!野村建议“战术超配”,花旗上调恒指目标价
  • “水运江苏”“航运浙江”,江浙两省为何都在发力内河航运?
  • 习近平出席中国-拉美和加勒比国家共同体论坛第四届部长级会议开幕式
  • 中国一直忽视欧盟经贸问题关切?外交部:事实证明中欧相互成就,共同发展
  • 淡马锡辟谣:淡马锡和太白投资未在中国销售任何投资产品或金融工具
  • 中国科学院院士徐春明不再担任山东石油化工学院校长