全部文档 / 作者: Dongxi 东锡 NLP / 标签: LoRA

2 篇

LoRA 与 QLoRA：用一块 GPU 微调大模型

本文从“模式”（一列乘一行的秩1矩阵）概念出发，系统讲解 LoRA 与 QLoRA 如何降低大模型微调的显存开销。LoRA 通过低秩近似冻结原有权重，只训练少量新增模式（B·A），将可训练参数减少到约万分之一；量化则用 4 位 NF4 格式配合分块缩放和双重量化存储权重，保留全部模式但降低每个数的精度。QLoRA 结合两者：冻结权重用 4 位存储，LoRA 分支用 16 位训练，使 65B 模型只需一块 48GB GPU 即可微调，Guanaco 在 Vicuna 评测中达到 ChatGPT 的 99.3%。文中还比较了低秩近似与量化误差结构的不同，并给出 7B 模型显存估算：全参数微调约 100GB，LoRA 约 15GB，QLoRA 约 5GB。

技术 › LLM

Dongxi 东锡 NLP 2026-10-2412.7 KB 13K 32 76

LoRA QLoRA 微调量化低秩近似大模型 GPU SVD NF4 后训练

指令微调：理解 Instruction Tuning

本文是后训练系列第二篇，介绍指令微调（SFT）。以斯坦福 Alpaca 用 52,000 条自动生成的数据微调 LLaMA 7B 为例，说明指令微调与预训练使用相同的下一个 token 预测损失，但数据和任务不同。文章详细讲解训练五步骤：收集、格式化、掩码、训练、评测，并通过 LIMA 和 FLAN 研究说明指令微调主要改变模型行为方式而非增加知识，少量数据即可泛化到新任务。还介绍了损失掩码原理、位置错开的实现细节、指令数据的三种来源及其局限：无法补充知识、比较回答优劣或检验正确性。

技术 › LLM

Dongxi 东锡 NLP 2026-10-2312.4 KB 8.9K 59 83

指令微调 SFT LLaMA Alpaca 后训练损失掩码 LoRA 机器学习 NLP