QLoRAとは？わかりやすく解説｜AI Reboot

QLoRAは、LoRA（低ランク適応）と4bit量子化を組み合わせた、メモリ効率の極めて高いファインチューニング手法です。2023年に発表され、従来は高価なGPUが必要だった大規模LLM（65Bパラメータ規模）のファインチューニングを、単一の48GB GPUで可能にしました。