Mask2Former nima va uning so'rovga asoslangan yondashuvi nima?
sobes.tech AI
AIdan javob
Mask2Former — bu zamonaviy yondashuv bo‘lishi uchun tasvirlarni segmentatsiya qilish vazifalariga, u turli segmentatsiya turlarini (masalan, semantik, instans va panoptik) yagona arxitekturaga birlashtiradi. Asosiy g‘oya — transformatorlardan ilhomlangan query-based (so‘rovga asoslangan) mexanizmni ishlatib, ob’ekt maskalarini bashorat qilish.
An’anaviy chiziqli yoki piksel bo‘yicha klassifikator o‘rniga, Mask2Former segmentatsiyani maskalar to‘plamini qidirish vazifasi sifatida formulalash uchun o‘rganiladigan so‘rovlar to‘plamidan foydalanadi. Har bir so‘rov bitta maskani va uning sinfini bashorat qilish uchun javobgardir. Bu modelga ob’ektlar va fonni samarali ajratishga imkon beradi, shuningdek, turli segmentatsiya turlarini bir arxivda ishlash imkonini beradi.
Taxminan shunday ishlaydi:
- Kirish rasmi backbone (masalan, CNN yoki transformator) orqali o‘tkaziladi, bu yerda xususiyatlar olinadi.
- Bu xususiyatlar transformatorga yuboriladi, bu yerda o‘rganiladigan so‘rovlar xususiyatlar bilan o‘zaro ta’sir qiladi.
- Har bir so‘rov uchun chiqish maskasi va sinf bo‘ladi.
Ushbu yondashuv arxitekturani soddalashtiradi va global kontekst va so‘rovlarning moslashuvchanligi orqali segmentatsiya sifatini yaxshilaydi.