Kto má väčšie receptívne pole: dve po sebe idúce konvolúcie 3x3 alebo jedna konvolúcia 5x5?

Dve po sebe idúce konvolúcie 3x3 majú väčšie prijímacie pole ako jedna 5x5.

Vysvetlenie:

• Prijímacie pole je oblasť vstupného obrázka, ktorá ovplyvňuje určitý neurón.
• Konvolúcia 5x5 pokrýva 5x5 pixelov.
• Dve po sebe idúce konvolúcie 3x3 zväčšujú prijímacie pole prekrytím: prvá sa pozerá na 3x3, druhá na 3x3 výstupy prvej, čo dohromady dáva prijímacie pole 5x5.

Výhody dvoch konvolúcií 3x3:

• Menej parametrov ako jedna 5x5.
• Hlbšia reprezentácia vďaka dvom nelinearitam (aktiváciám).

Záver: dve sériové konvolúcie 3x3 poskytujú rovnaké alebo väčšie prijímacie pole ako jedna 5x5, pričom sú efektívnejšie z hľadiska parametrov a učenia.