Kurz-Fakten

  • Trainiert meist unter einem Prozent der Parameter
  • Ergebnisdatei ist wenige Megabyte statt viele Gigabyte
  • QLoRA kombiniert das Verfahren mit Quantisierung
  • Auch bei Bildmodellen wie Stable Diffusion verbreitet

Bedeutung in der Praxis

Der praktische Vorteil liegt im Betrieb: Ein Grundmodell im Speicher, mehrere Anpassungen für verschiedene Abteilungen. Das ist deutlich günstiger als mehrere vollständig feinjustierte Modelle.

Verwandte Begriffe