Wat is query-by-committee?

Query-by-committee (QBC) is een actieve leermethode waarbij een comité (set) van modellen wordt gebruikt om de meest informatieve voorbeelden voor labeling te selecteren.

Het idee is dat meerdere modellen, getraind op de huidige gegevens, voorspellingen doen over niet-gelabelde gegevens. De objecten waarop de modellen verschillen (hoge dissonantie) worden als het meest nuttig voor training beschouwd en worden geselecteerd voor labeling door een mens.

Voordelen:

• Maakt efficiënt gebruik van een beperkt labelbudget mogelijk.
• Vermindert de hoeveelheid benodigde gelabelde gegevens.

Voorbeeld:

• Er zijn 3 modellen (comité), getraind op de huidige set.
• Voor elk nieuw object geven de modellen voorspellingen.
• Als de modellen sterk verschillen (bijvoorbeeld, 2 modellen denken dat het klasse A is, 1 klasse B), wordt dat object geselecteerd voor labeling.

Op deze manier helpt QBC zich te richten op moeilijke voorbeelden, waardoor de modelkwaliteit wordt verbeterd met minder labelingkosten.