Das Wichtigste

Der auf einer kostenlosen Tesla T4 trainierte Prototyp ist ausdrücklich kein Medizinprodukt.
Die AUC sank nach der vollständigen Prüfung von 0,963 auf 0,931.
Ein Modell, das nahezu nur Knochenstruktur sieht, erreicht immerhin 0,86; der Beitrag untersucht daher auch die Auswirkungen der Masken.

Einordnung

Diese Fallstudie zeigt, wie stark die Bewertung von einem scheinbar hohen AUC-Wert abhängt. Für technische Entscheider ist sie ein Beispiel dafür, dass Validierung, Sichtbarkeit der relevanten Bildbereiche und die Qualität der Annotationen vor einer belastbaren Qualitätsaussage geprüft werden müssen.

Was das für Sie heisst

Direkt anwendbar

Entwickler erhalten ein konkretes Beispiel dafür, wie sich Masken und unterschiedliche Validierungsumfänge auf die gemessene KI-Leistung auswirken können.

Wer davon profitiert: Entwickler profitieren von den nachvollziehbaren Versuchsschritten und der Warnung, dass eine hohe AUC ohne geeignete Gegenprüfung irreführend sein kann.