当前位置: 首页 > news >正文

自己安装一台DeepSeek的服务器

找一台还可以的Linux服务器,登录后执行:

curl -fsSL https://ollama.com/install.sh | sh

等待安装完成:

执行命令,根据服务器能力安装不同版本的AI模型:

ollama run llama3.2

下一步就开始对话吧:

llama3.2一点都不行呀

退出对话

Use Ctrl + d or /bye to exit.

 DeepSeek会有很多版本,大家都可以尝试:

版本:1.5b,适用于一般文字编辑使用(需要1.1GB空余空间)
ollama run deepseek-r1:1.5b
版本:7b,DeepSeek的第一代推理模型,性能与OpenAl-01相当,包括从基于Llama和Qwen的DeepSeek-R1中提取的六个密集模型(需要
4.7GB空余空间)
ollama run deepseek-r1:7b
版本:8b,(需要4.9GB空余空间)
ollama run deepseek-r1:8b
版本:14b,(需要9GB空余空间)
ollama run deepseek-r1:14b
版本:32b,(需要20GB空余空间)
ollama run deepseek-r1:32b
版本:70b,(需要43GB空余空间)
ollama run deepseek-r1:70b
版本:671b,(需要404GB空余空间)
ollama run deepseek-r1:671b

安装 deepseek-r1:7b,服务器空间算力够,就安装更大的版本:

 

操作ollama服务器命令

systemctl restart ollama
systemctl start ollama
systemctl stop ollama
systemctl status ollama

查看已安装的ollama列表

ollama list

配置外网可以访问:

关闭防火墙

systemctl stop firewalld
systemctl disable firewalld

 设置ollama配置文件

vim /etc/systemd/system/ollama.service


[Unit]
Description=Ollama Service
After=network-online.target

[Service]
ExecStart=/usr/local/bin/ollama serve
User=ollama
Group=ollama
Restart=always
RestartSec=3
Environment=“PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin”
Environment=“OLLAMA_HOST=0.0.0.0:9999”

[Install]
WantedBy=default.target

新增 Environment=“OLLAMA_HOST=0.0.0.0:9999”  其中端口可以随便更改,默认11434

重新启动 ollama 服务器

见    操作ollama服务器命令

验证9999端口是否可用

端口验证

netstat -tuln | grep 9999

如上图即可

curl验证

curl http://192.168.1.63:9999

失败:curl: (7) Failed connect to 192.168.1.63:9999; Connection refused

成功:Ollama is running

telnet验证

telnet 192.168.1.63 9999

相关文章:

  • 基于python实现机器学习的心脏病预测系统
  • 导出指定文件夹下的文件结构 工具模块-Python
  • PostgreSQL的学习心得和知识总结(一百六十九)|深入理解PostgreSQL数据库之 Group By 键值消除 的使用和实现
  • 【Pandas】pandas Series reindex
  • MySQL 的存储引擎简介
  • “深入浅出”系列之C++:(21)C++23
  • 使用 Ansys HFSS 对植入式医疗设备进行无线电力传输和 SAR 仿真
  • Day41 移除链表元素
  • 查询计算每一天的累计销售金额以及与前一天相比的销售金额增长额
  • 编译linux SDK
  • html网络安全工具源码 网络安全前端
  • 网络安全 逆向 apk 网络安全逆向分析
  • DeepSeek-学习与实践
  • 电容的温度系数分析
  • Qt中的MOC元对象系统内部原理介绍与开发应用
  • 【Git】初识Git 基础操作
  • DL/CV领域常见指标术语(FLOPS/mIoU/混淆矩阵/F1-measure)------一篇入门
  • C/C++流星雨
  • vue3 ref和reactive的区别
  • MOS管炸了,PWM“死区”时间得了解一下
  • 美国明尼苏达州发生山火,过火面积超80平方公里
  • 俄土外长通话讨论俄乌谈判问题
  • 铁路部门:确保沿线群众安全,焦柳铁路6个区段将陆续安装防护栅栏
  • 澎湃思想周报|欧洲胜利日之思;教育监控与学生隐私权争议
  • 专访|日本驻华大使金杉宪治:对美、对华外交必须在保持平衡的基础上稳步推进
  • IPO周报|本周A股暂无新股网上申购,年内最低价股周二上市