Какво е adversarial validation и защо е необходима?

Адверсариална валидация е метод за проверка колко сходни са разпределенията на обучаващите и тестовите набори. За това се създава класификатор, чиято задача е да различава обекти от обучаващия набор от тези от тестовия. Ако класификаторът показва висока точност, това означава, че разпределенията се различават силно, и моделът може да се обобщава зле върху тестовите данни.

За какво е необходимо:

• Да се провери дали няма пристрастия между обучаващия и тестовия набор.
• Да се разбере дали избраният тестов набор е подходящ.
• В задачи с таблични данни и буустинг модели помага да се открият проблеми с обобщаването.

Пример: ако adversarial validation показва, че данните от различни набори лесно се разделят, е добре да преразгледате стратегията за разделяне на данните или да приложите методи за адаптация.