LlamaFactory

LlamaFactory

统一高效微调百余种大模型

AI官网

应用介绍

想用自己的数据微调一个 Qwen 或 Llama,每个模型的训练脚本和参数都不一样,显存还总是不够。LlamaFactory 是一个统一高效地微调 100 多种大语言模型和视觉语言模型的框架。

它支持 LoRA、QLoRA、全参数微调和 RLHF,带网页界面零代码操作,亚马逊、英伟达、阿里云都在用。

软件功能



百余模型:Qwen、Llama、DeepSeek。

高效微调:LoRA 与 QLoRA。

对齐训练:RLHF 与 DPO。

网页界面:零代码。

应用截图