当前位置： 首页 > news >正文

垂类大模型微调（二）：使用LLaMA-Factory

news 2025/9/20 12:14:49

       上一篇博文和大家一起安装了LLaMA-Factory工具，并下载了大模型在上面进行了简单的加载和推理，今天尝试通过LoRa技术对大模型进行微调；

一、训练集准备

1.1 介绍训练集结构

       这里演示对Qwen2.5-0.5B-Instruct-GPTQ-Int4模型进行LoRA微调， 大家可以根据垂类大模型微调（一）从魔塔中下载对应模型；目前该工具支持指令监督微调（ Alpaca 格式）和多轮对话微调（

http://www.dtcms.com/a/33688.html

相关文章：

  • vscode settings(一)：全局| 用户设置常用的设置项
  • Steam回退游戏版本
  • 【量化科普】Alpha，阿尔法
  • DeepSeek 从入门到精通：全面掌握 DeepSeek 的核心功能与应用
  • Univention介绍
  • java实现多图合成mp4和视频附件下载
  • Django项目开发的网站展示来自fasta文件的蛋白质名称和序列的可视化表格
  • 解决滚动条加入/移除而“被挤动”产生布局偏移问题的方案
  • 深度剖析 C 语言函数递归：原理、应用与优化
  • Java 大视界 -- 总结与展望：Java 大数据领域的新征程与无限可能（96）
  • 紫光同创开发板使用教程(二)：sbit文件下载
  • 蓝桥杯 Java B 组之背包问题（01背包、完全背包）
  • PyQt 界面设置与布局：菜单栏、工具栏、主体、提示栏布局
  • R与RStudio简介及安装
  • CF 14B.Young Photographer(Java实现)
  • 遗传算法初探
  • 5. 最长回文子串
  • Qt学习 网络编程 TPC通信
  • springcloud整合seata
  • 华为 网络安全 认证
  • redis-性能下降的原因排查
  • 基于SpringBoot的二手交易系统
  • openharmony中hdf框架的驱动消息机制的实现原理
  • 常见的“锁”有哪些？
  • (200): error: #29: expected an expression error: #40: expected an identifier
  • 一周学会Flask3 Python Web开发-Jinja2模板基本使用
  • 福禄抽-测试报告
  • ASP.NET MVC 下载文件
  • Android移动应用开发实践-1-下载安装和简单使用Android Studio 3.5.2版本（频频出错）
  • Oracle中补全时间的处理