当前位置: 首页 > news >正文

deepseek 70b 部署需要的配置



两张3090 24G跑deepseek 70b还挺流畅_哔哩哔哩_bilibili

双4090部署Deepseek-R1 每秒130tokens_哔哩哔哩_bilibili

万元服务器运行满血DeepSeek!全网最全低成本部署方案+硬件采购避坑指南!KTransformers方案+Unsloth动态量化方案详解!_哔哩哔哩_bilibili

 

总结:

看需求

- 如果只是想自己部署玩玩,2x24的3090或4090就够
- 如果是小团队用,4x4090
- 如果是追求响应速度和高并发,建议最少a100x2或h800x2
总之,显存不够内存来凑,跑是都能跑起来,主要看每秒输出token数。

相关文章:

  • Spring Boot电影评论网站系统设计与实现
  • 【redis】数据类型之hyperloglog
  • 了解模型压缩与加速
  • 【Arxiv 大模型最新进展】北大 Parenting 方法登场:参数魔法解锁检索增强语言模型新高度!
  • leetcode_动态规划和递归 509. 斐波那契数
  • Compose 动画,让页面动起来
  • 2014年下半年试题一:论软件需求管理
  • 创建型模式 - 建造者模式 (Builder Pattern)
  • ProGuard加密混淆SpringBoot应用代码
  • RTSP中RTP/RTCP协议栈、NTP同步及QoS机制
  • hutool工具类的DateUtil和LocalDateTimeUtil
  • AMD GPU 的 Context Roll机制
  • MyBatis简明教程
  • python爬虫学习第十一篇爬取指定类型数据
  • C 语言结构体:从入门到进阶的全面解析
  • 赋能农业数字化转型 雏森科技助力“聚农拼”平台建设
  • pytorch基础-nn.linear
  • 【软件测试阶段一】【软件测试:确保项目质量的关键防线】
  • c++day5
  • Spring Boot + Vue 接入腾讯云人脸识别API(SDK版本3.1.830)
  • 中国文化网站建设策划书/公司软文怎么写
  • 哪个网站可以做店招店标轮播/app推广注册招代理
  • 公司网站一定要备案吗/淘宝营销推广方案
  • 营业执照如何办理/抚州seo外包
  • 专门做图片的网站吗/定制化网站建设
  • 骨干专业群建设任务书网站/软文推广渠道