Czym jest preferencja parowa i jak ją obliczyć?

Preferencja parowa to metoda oceny preferencji między parami obiektów lub opcji. W kontekście uczenia maszynowego i sztucznej inteligencji jest często używana do trenowania modeli rankingowych lub oceny jakości, gdzie ważne jest określenie, która z dwóch opcji jest bardziej preferowana.

Aby obliczyć preferencję parową, porównuje się każdą parę obiektów i określa, który z nich jest lepszy według zadanego kryterium. Na przykład, jeśli mamy zestaw elementów z ocenami, dla każdej pary (i, j) oblicza się:

• 1, jeśli i jest preferowane względem j
• 0, jeśli j jest preferowane względem i
• 0.5 lub pomija się, jeśli są równe

W zadaniach uczenia ze wzmocnieniem lub rankingowania, pomaga to tworzyć funkcję straty, która minimalizuje błędy w przewidywaniu preferencji między parami.

Przykład obliczenia dla listy ocen:

scores = [3, 5, 2]
pairwise_preferences = []
for i in range(len(scores)):
    for j in range(i+1, len(scores)):
        if scores[i] > scores[j]:
            pairwise_preferences.append((i, j, 1))  # i preferowane względem j
        elif scores[i] < scores[j]:
            pairwise_preferences.append((i, j, 0))  # j preferowane względem i
        else:
            pairwise_preferences.append((i, j, 0.5))  # równe

W związku z tym, preferencja parowa to sposób formalizacji i wykorzystania informacji o preferencjach między elementami do trenowania i oceny modeli.