MS-SSIM-Familie

Neben der auf Signaltreue trainierten Familie gibt es eine zweite, auf die Wahrnehmungsmetrik MS-SSIM trainierte Familie — mit einem aufschlussreichen, gemischten Ergebnis.

Kernpipeline

Modellfamilie für Wahrnehmungstreue

Neben der auf Signaltreue trainierten Familie gibt es eine zweite, auf die Wahrnehmungsmetrik MS-SSIM trainierte Familie — mit einem aufschlussreichen, gemischten Ergebnis.

−31,6%kleiner als AVIF in MS-SSIM, Kodak-Testset
24/24Testbilder zugunsten KARC auf Kodak
+21,6%umgekehrtes Ergebnis auf unabhängigem Testset
1/14Testbilder zugunsten KARC dort

Ergebnis auf dem Kodak-Testset

Bei gleicher Bitrate schlagen die wahrnehmungsoptimierten Checkpoints AVIF in der MS-SSIM-Metrik auf jedem einzelnen der 24 Testbilder. Ein früherer Einwand, das beruhe nur auf einer Stichprobe von fünf Bildern, ist damit ausgeräumt.

Keine Familie ist auf beiden Metriken vorn

Das ist der eigentliche Kern des Befunds und gilt in beide Richtungen:

Familie in MS-SSIM gegen AVIF in PSNR gegen AVIF
Signaltreue-optimiert +6,0 % (schlechter) −24,7 % (besser)
Wahrnehmungs-optimiert −31,6 % (besser) +19,7 % (schlechter)

Wer eine Familie für eine Metrik optimiert, bezahlt in der anderen. Die überarbeitete zweite Modellgeneration, die aktuell trainiert, zielt unter anderem darauf, diese Lücke zu schließen. Belastbare Zahlen für sie gibt es noch nicht.

Zur Roadmap