რა არის სურათის აღწერა და რა მეტრიკები აფასებენ მას (CIDEr)?

სურათის აღწერა — ეს კომპიუტერული ხედვის და ბუნებრივი ენის დამუშავების სფეროს დავალებაა, რომელიც გულისხმობს ავტომატურად სურათის აღწერის (სათაურის) შექმნას. მოდელი იღებს სურათს შესატანად და ქმნის ტექსტს, რომელიც აღწერს მის შინაარსს.

შექმნილი აღწერების ხარისხის შეფასებისთვის გამოიყენება სხვადასხვა მეტრიკა, ერთ-ერთი მათგანია CIDEr (Consensus-based Image Description Evaluation). იგი ზომავს, რამდენად კარგად ემთხვევა შექმნილი აღწერა რეფერენციული აღწერების ნაკრებს, განიხილავს სიტყვებისა და ფრაზების სიხშირეს და მნიშვნელობას.

CIDEr-ის მახასიათებლები:

• დაფუძნებულია n-გრამების გამოთვლაზე (საშუალოდ 1-დან 4-მდე).
• იყენებს TF-IDF წონასწორობას სიტყვების მნიშვნელობის გასათვალისწინებლად.
• მაღალი CIDEr მნიშვნელობა მიუთითებს, რომ შექმნილი აღწერა კარგად ემთხვევა რეფერენციულ აღწერებს.

ამ გზით, CIDEr ეხმარება ობიექტურად შეფასდეს სურათის აღწერის მოდელების ხარისხი, განიხილავს აღწერების მრავალფეროვნებას და შესაბამისობას.