Stable Diffusionда кайсы түрү U-Net колдонулат? Ал обычный U-Netке салыштырмалуу кандай өзгөчөлүктөргө ээ?

Stable Diffusionда, сүрөттөрдүн диффузиялык моделдөө тапшырмаларына ылайыкташтырылган, өзгөртүлгөн U-Net архитектурасы колдонулат.

Бул U-Netтин классикалык версияга салыштырмалуу өзгөчөлүктөрү:

• Кирүү маалыматтары: Жөнөкөй сүрөттөрдүн ордуна, шуу аралашкан сүрөт жана диффузиянын убакыт кадамы (шуу деңгээли) берилет; ал коддолуп, тармакка берилет.
• Убакыттын инъекциясы: Архитектурага убакыт кадамын эске алуу механизмдери кошулду (убакыттеги орнотуу), бул моделге шуу даражасын эске алууга мүмкүндүк берет.
• Эчтек колдонуу: U-Netтин айрым катмарынын ичинде көңүл буруу механизмдери (өз-өзүнчө көңүл буруу) кошулду, бул моделдин сүрөттөгү глобалдык көзкараштарды кармоо жөндөмүн жакшыртат.
• Өзгөртүлгөн блоктор: Стандарттык конволюциялык блоктордун ордуна, нормалдаштыруу жана активдештирүү менен ResNet блоктору колдонулат, бул туруктуу үйрөнүү үчүн оптималдаштырылган.

Мындайча айтканда, Stable Diffusionдеги U-Net — бул классикалык структураны кошумча механизмдер менен айкалыштырган атайын архитектура; бул сүрөттөрдү түзүү үчүн диффузиялык моделдер үчүн өтө маанилүү.