Что такое curiosity-driven exploration?

Curiosity-driven exploration — это подход в обучении с подкреплением, при котором агент исследует среду, руководствуясь внутренним мотиватором — любопытством. Вместо того чтобы полагаться только на внешние награды, агент получает внутренние вознаграждения за изучение новых или неожиданных состояний.

Это помогает агенту лучше исследовать среду, особенно когда внешние награды редки или отсутствуют. Например, агент может получать бонусы за посещение ранее неизведанных областей или за уменьшение неопределённости модели среды.

Такой подход способствует более эффективному обучению и развитию навыков, которые сложно получить только через внешние стимулы.