LoRA:低秩适配微调

124 字 · 预计阅读 1 分钟

2021 · Hu 等 / Microsoft · 只训练低秩小矩阵,就能微调大模型

2021 年,Hu 等人在微软提出 LoRA。它冻结预训练权重,在每层旁边加一对低秩矩阵 A 和 B

本文是会员内容

全文 124 字,已试读约 27%。开通专业版可阅读全文,并解锁全部官方课程与后续更新。

开通专业版

支持 7 天无理由退款 · 早鸟价 99 元/年(售完恢复365/年)

课程中涉及的第三方项目,其著作权与商标归各自权利人所有;引用处的署名与许可见《开源与来源说明》。