当前位置: 首页 > news >正文

linux下ollama离线安装

一、离线安装包下载地址

直接下载地址:

https://github.com/ollama/ollama/releases/tag/v0.5.12 

网络爬取地址:

MacOS https://ollama.com/download/Ollama-darwin.zip 
Linux curl -fsSL https://ollama.com/install.sh | sh 
Windows https://ollama.com/download/OllamaSetup.exe 
Github https://hub.nuaa.cf/ollama/ollama/releases

二、下载

可以直接从github上下载安装包,然后传到Linux中进行解压即可,解压之后移动到/usr/bin/ollama
解压:tar -zxvf ollama-linux-amd64.tgz -C /usr/bin
移动:mv /home/usr/desktop/ollama-linux-amd64.run /usr/bin/ollama(移动到/usr/bin下且重命名为ollama)

或使用下载命令: wget https://hub.nuaa.cf/ollama/ollama/releases/download/v0.1.32/ollama-linux-amd64 -O /usr/bin/ollama

权限授予命令: sudo chmod +x /usr/bin/ollama

三、创建Ollama用户

sudo useradd -r -s /bin/false -m -d /usr/share/ollama ollama

四、 赋予 ollama 用户执行权限

sudo chown ollama:ollama /usr/bin/ollama
sudo chmod 755 /usr/bin/ollama

五、查模型存储目录权限

 创建存储目录并赋予权限
sudo mkdir -p /home/ollama/.ollama/models
sudo chown -R ollama:ollama /home/ollama/.ollama/models
sudo chmod 755 /home/ollama/.ollama/models
sudo chown -R ollama:ollama /home/ollama/.ollama
sudo chmod 755 /home/ollama/.ollama

六、配置systemd服务‌创建服务文件

sudo vim /etc/systemd/system/ollama.service

把以下内容填入服务文件中:

[Unit]
Description=Ollama Service
After=network-online.target
[Service]
Environment="OLLAMA_HOST=0.0.0.0:11434"
ExecStart=/usr/bin/ollama serve
User=ollama
Group=ollama
Restart=always
RestartSec=3
Environment="OLLAMA_MODELS=/home/ollama/.ollama/models"
[Install]
WantedBy=default.target

七、启动服务

# 重新加载服务配置
sudo systemctl daemon-reload
# 开机自启动
sudo systemctl enable ollama
# 立刻启动
sudo systemctl start ollama
# 重启服务
sudo systemctl restart ollama
#检查服务状态
systemctl status ollama

在这里插入图片描述
八、下载模型

ollama run qwq

在这里插入图片描述

相关文章:

  • Unity游戏开发中的网格简化与LOD技术(Mesh Simplification LOD)
  • Linux基础--文件权限+软件包管理+管道符
  • mysql中in和exists的区别?
  • 深入解析ECDSA与RSA公钥算法:原理、对比及AWS最佳实践
  • 【AD】5-14 多跟走线设置
  • 16位-32768的补码和原码是什么【补码和原码的转换】
  • spring IOC(实现原理)
  • 如何让一个类作为可调用对象被thread调用?
  • WSL with NVIDIA Container Toolkit
  • 基于单片机的风速报警装置设计
  • 深度学习模型组件之优化器--自适应学习率优化方法(Adadelta、Adam、AdamW)
  • 【Ant Design X Vue】Vue 首个 AI 组件库发布!
  • 前端题目类型
  • 记录小白使用 Cursor 开发第一个微信小程序(一):注册账号及下载工具(250308)
  • manus本地部署方法研究测试
  • 后序线索化二叉树,并找到指定结点前驱,非递归逆序输出
  • 通义万相 2.1 + 蓝耘算力,AI 视频生成的梦幻组合
  • 机器学习图像标记工具MyVision的使用教程
  • Unity, AssetBundle的一些“隐藏”方法
  • JavaScript基础-递增和递减运算符
  • 专业做包包的网站/北京优化网站公司
  • 在国外服务器上做网站项目如何赚钱/seo推广教学
  • 成品大香伊煮蕉免费在线/晋城seo
  • 沧州网站建设公司/网络营销策划的基本原则
  • 网站建设属于什么职位类别/网络营销方案的制定
  • 品牌宣传推广文案/合肥优化推广公司