Τι είναι η αυτο-απόσταξη στο CV;

Η αυτο-απόσταξη στην υπολογιστική όραση είναι μια μέθοδος όπου το ίδιο μοντέλο χρησιμοποιείται τόσο ως δάσκαλος όσο και ως μαθητής. Η ιδέα είναι ότι το μοντέλο εκπαιδεύεται στις δικές του προβλέψεις, βελτιώνοντας την ποιότητα χωρίς την ανάγκη για ένα μεγάλο ξεχωριστό μοντέλο δασκάλου.

Παράδειγμα: αρχικά, το μοντέλο εκπαιδεύεται σε επισημασμένα δεδομένα, στη συνέχεια παράγει "μαλακές" ετικέτες (soft labels) για τα ίδια ή πρόσθετα δεδομένα, και επανεκπαιδεύεται σε αυτές τις ετικέτες, βοηθώντας στη βελτίωση της γενίκευσης.

Αυτό βοηθά στην αύξηση της ακρίβειας και της ανθεκτικότητας του μοντέλου χωρίς να αυξάνει το μέγεθός του.