当前位置: 首页 > news >正文

学习本地部署DeepSeek的过程(基于LM Studio)

  除了使用Ollama部署DeepSeek,还可以使用LM Studio部署DeepSeek,后者是一款允许用户在本地计算机上运行大型语言模型(LLMs)的桌面应用程序,旨在简化本地模型的使用,无需云端连接或复杂配置即可体验 AI 功能。本文学习并记录基于LM Studio部署DeepSeek的过程。
  登录lmstudio官网,下载并安装LM Studio软件,如下图所示。

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
  运行 LM Studio,第一次启动时会显示下图所示界面,点击右上角的“Skip onboarding”直接进入主界面。
在这里插入图片描述
  点击主界面左侧的“发现”图标(图标为一放大镜),点击左下角的App Settings按钮,可以在右侧设置语言、主题等设置。
在这里插入图片描述
  在同一界面,点击左上角的Model Search标签,在左侧按需搜索模型文件,本文中选择了配置要求较低的deepseek-r1-distill-qwen-1.5b模型,然后点击右下角的Download按钮下载并加载模型。

在这里插入图片描述
  点击主界面左侧第一个聊天图标,在下图圈红处下拉选择模型,本文测试过程中会提示模型加载失败,报“Exit code: 18446744072635812000”的错误。
在这里插入图片描述
  百度上述错误信息,找到参考文献3,提示可能是选择的运行时有问题。在主界面左侧点击发现图标,然后点击Runtime标签,在右下侧的配置运行环境中将GGUF设置为“CPU llama.cpp (Windows)。
在这里插入图片描述
  再切换回聊天页面,在页面上方选择模型,然后就可以正常和本地模型对话了。
在这里插入图片描述

参考文献:
[1]https://lmstudio.ai/
[2]https://blog.csdn.net/hj960511/article/details/145390784
[3]https://blog.csdn.net/huangyabin001/article/details/145817292

http://www.dtcms.com/a/93227.html

相关文章:

  • 调用通义千问实现语音合成并将合成的音频通过扬声器播放
  • Transformer 通关秘籍2:利用 BERT 将文本 token 化
  • 【悲观锁和乐观锁有什么区别】以及在Spring Boot、MybatisPlus、PostgreSql中使用
  • 简历含金量的描述和注意事项!
  • 如何用Redis统计网站的UV
  • 影刀魔法指令3.0:开启自动化新篇章
  • 计算机视觉3——模板匹配与拟合
  • Maven入门
  • 3.26学习总结
  • Android系统的安全问题 - Android的Trusty TEE
  • LLM实践(二)——基于llama-factory的模型微调
  • OpenGL绘制文本
  • SQL Server常见问题解析
  • WPF ContentTemplate
  • Pytorch学习笔记(七)Learn the Basics - Optimizing Model Parameters
  • C++——重载
  • Linux系统-ls命令
  • 极光优化PLO-Transformer-LSTM多变量时序
  • 具身系列——Diffusion Policy算法实现CartPole游戏
  • Jetpack LiveData 使用与原理解析
  • Hosts文件屏蔽广告/恶意网站的原理详解
  • Ansys Zemax | 联合Speos实现供应商与OEM交换黑盒光学系统
  • MongoDB 创建数据库
  • 3个版本的Unity项目的异同
  • vue3 ts 封装axios,配置axios前置拦截器,让所有axios请求携带token
  • 使用docker部署springboot、Vue分离项目,部署到主路径
  • Docker技术系列文章,第八篇——Docker 安全基础
  • 华鲲振宇天工TG225 B1国产服务器试装openEuler22.03 -SP4系统
  • LabVIEW多CAN设备连接故障
  • SICAR 标准 KUKA 机器人标准功能块说明手册