В чем разница между семантической сегментацией, инстанс-сегментацией и детекцией объектов?

Эти три задачи связаны с анализом изображений, но имеют разные цели и уровни детализации:

• Детекция объектов (Object Detection): Определяет и локализует объекты на изображении, обычно с помощью ограничивающих прямоугольников (bounding boxes). Например, найти все машины на фото и обвести их рамками.

• Семантическая сегментация (Semantic Segmentation): Классифицирует каждый пиксель изображения, присваивая ему метку класса (например, дорога, машина, человек), но не различает отдельные объекты одного класса. Все пиксели машин будут помечены одинаково, без разделения на отдельные экземпляры.

• Инстанс-сегментация (Instance Segmentation): Комбинирует детекцию и семантическую сегментацию — не только классифицирует пиксели, но и разделяет объекты одного класса на отдельные экземпляры. Например, на изображении с несколькими машинами каждая машина будет выделена как отдельный объект с маской.

Таким образом, детекция даёт ограничивающие рамки, семантическая сегментация — маски по классам без разделения объектов, а инстанс-сегментация — маски с разделением объектов одного класса.