Cine s-a ocupat de implementarea în producție și care au fost metricile de succes ale proiectului?

Implementarea în producție este de obicei realizată de echipa DevOps sau inginerii de lansare, dar în proiectele ML participă adesea și data scientists sau ingineri ML.

Metricele de succes ale proiectului depind de obiective, dar pot include:

• Calitatea modelului: acuratețe, completitudine, scor F1 pe date reale.
• Timpul de răspuns al serviciului.
• Stabilitatea și fiabilitatea funcționării (uptime).
• Impactul asupra indicatorilor de afaceri: creșterea conversiei, reducerea costurilor, îmbunătățirea experienței utilizatorului.
• Monitorizarea driftului modelului și actualizarea în timp util.

De exemplu, la implementarea unui model de recomandări, succesul va fi creșterea CTR și retenția utilizatorilor, fiind important să se monitorizeze ca modelul să nu degradeze performanța sistemului.