Machine Learning / AI

Τι λαμβάνει το LLM στην έξοδο σε κάθε βήμα της inference;

Τι είναι το ROC AUC; Πώς κατασκευάζεται η καμπύλη ROC;

Middle

OZON

Πώς να ελέγξετε ότι το LLM-as-a-Judge αξιολογεί σωστά την ποιότητα και πώς να το βαθμονομήσετε;

Senior

2gis

Καταλαβαίνω σωστά ότι υπήρχε και εμπειρία tuning LLM;

Ποιο είναι το μέγεθος των logits και πώς προκύπτει ένα token από αυτά;

Πώς θα χρησιμοποιούσατε ακριβώς το `EXPLAIN` για να εντοπίσετε προβλήματα απόδοσης σε αυτό το ερώτημα;

Έχεις στρατιωτικό πιστοποιητικό ή δελτίο εγγραφής;

Middle+

Avito

Πώς να εργαστείτε με ιδιωτικά δεδομένα κατά την τοπική ανάπτυξη του συστήματος;

Ποιες εργασίες αντιμετωπίζεις; Ποιο στοίβα χρησιμοποιείς κυρίως;

Middle

Aston

Άλλοι μηχανικοί ML με εμπειρία, αντίθετα, θέλουν διαφορετικά έργα για να δοκιμάσουν τα πάντα. Εσύ, αντίθετα, τι θέλεις...?

Παρακαλώ, πείτε μου τις μισθολογικές σας προσδοκίες.

Senior

ivi

Πείτε μας για μία από τις πρόσφατες εργασίες ταξινόμησης και περιγράψτε το pipeline της.

Πώς υπολογίζεται η καμπύλη ROC με επαναληπτικό τρόπο μετά την κατάταξη των αντικειμένων με βάση το σκορ;

Πώς περιγράφατε τα εργαλεία; Ποιο είναι το γενικό φορμάτ και οι βασικές απαιτήσεις για την περιγραφή;

Πώς συλλέξατε γενικά τις απαιτήσεις; Σε ποια μορφή ήρθε αυτό το έργο — ιδέα ή λεπτομερής διατύπωση;

Πώς υλοποίησες το Graph RAG; Γιατί χρησιμοποίησες το Qdrant αν δεν υποστηρίζει εγγενώς γραφήματα;

Senior

СБЕР

Τι πρέπει να γίνει μετά την ανάκτηση για να διαμορφωθεί η απάντηση στον χρήστη και πώς αξιολογείται η ποιότητα της γεννήτριας στο RAG;

Senior

2gis

Υπήρχε μια λίστα ελέγχου που έπρεπε να ακολουθήσει ο χειριστής κατά τη διάρκεια της κλήσης, ή η επιθεώρηση πραγματοποιήθηκε χωρίς αυτή;

Δείξτε τη σειρά εκτέλεσης των τελεστών σε αυτό το ερώτημα SQL

Senior

Яндекс

Μπορούμε να χρησιμοποιήσουμε τα ίδια metrics όταν μετράμε την ποιότητα με το top-K και το metric που ρωτάμε τον χρήστη (μου αρέσει/δεν μου αρέσει); Ή είναι διαφορετικά πράγματα;

Senior

X5 tech