Mask2Former nədir və onun sorğu əsaslı yanaşması nədir?
sobes.tech Süni İntellekt
AI-dan cavab
Mask2Former — bu müasir yanaşma şəkil seqmentasiyası tapşırıqları üçün, müxtəlif seqmentasiya növlərini (məsələn, semantik, instans və panoptik) bir araya gətirən tək bir memariliyə malikdir. Əsas fikir — transformatorlardan ilhamlanan query-based (sorğu əsaslı) mexanizmi istifadə edərək obyekt maskalarını proqnozlaşdırmaqdır.
Ənənəvi xətt və ya piksel əsaslı klassifikator yerinə, Mask2Former seqmentasiyanı öyrənilə bilən sorğular toplusu vasitəsilə maskalar toplusunun axtarışı kimi formulə edir. Hər sorğu bir maska və onun sinfi üçün cavabdehdir. Bu, modelin obyektləri və fonu effektiv ayırmasına və müxtəlif seqmentasiya növlərini eyni çərçivədə işləməsinə imkan verir.
Təxminən belə işləyir:
- Giriş şəkli backbone (məsələn, CNN və ya transformator) vasitəsilə keçərək xüsusiyyətləri çıxarır.
- Bu xüsusiyyətlər transformatora daxil edilir, burada öyrənilə bilən sorğular xüsusiyyətlərlə qarşılıqlı əlaqədə olur.
- Hər sorğu üçün çıxış bir maska və sinifdir.
Bu yanaşma memariliyi sadələşdirir və qlobal kontekst və sorğuların elastikliyi sayəsində seqmentasiya keyfiyyətini artırır.