Was ist der Unterschied zwischen semantischer, Instanz- und Panoptischer Segmentierung?

Unterschiede zwischen semantischer, Instanz- und Panoptischer Segmentierung hängen vom Detaillierungsgrad und der Art der bereitgestellten Informationen ab:

• Semantische Segmentierung – klassifiziert jeden Pixel des Bildes nach Klasse (z.B. "Straße", "Himmel", "Auto"), unterscheidet aber keine einzelnen Objekte derselben Klasse. Alle Objekte einer Klasse werden zusammengefasst.

• Instanzsegmentierung – neben der Klassifizierung der Pixel hebt sie einzelne Instanzen von Objekten hervor. Zum Beispiel, wenn im Bild drei Autos sind, werden diese jeweils separat hervorgehoben.

• Panoptische Segmentierung – kombiniert semantische und Instanzsegmentierung und bietet eine vollständige Aufteilung des Bildes in Objekte mit Klassifikation und Unterscheidung einzelner Instanzen sowie die Segmentierung des Hintergrunds und unspezifischer Bereiche.

Daher liefert die panoptische Segmentierung die vollständigste Information über den Inhalt des Bildes.