Kurz-Fakten
- AUC 0,5 entspricht Raten, 1,0 einer perfekten Trennung
- Unabhängig vom Schwellenwert – das ist Stärke und Schwäche zugleich
- Bei stark ungleichen Klassen zu optimistisch
- Die Precision-Recall-Kurve ist dann die ehrlichere Darstellung
Bedeutung in der Praxis
Bei einem Anteil positiver Fälle von unter einem Prozent sieht die AUC regelmäßig hervorragend aus, während das Modell im Betrieb überwiegend Fehlalarme produziert. In solchen Fällen gehört die Precision-Recall-Kurve in den Bericht.