Sobes.tech
Junior — Middle

Mis on Nimekaitavate Entiteetide Tuvastamine (NER)? Millist märgistust kasutatakse kõige sagedamini (BIO, BIOES)?

sobes.tech AI

Vastus AI-lt

Nimetatud üksuste äratundmine (NER) on loomuliku keele töötlemise (NLP) valdkonnas ülesanne, mille eesmärk on automaatselt tuvastada ja klassifitseerida tekstis nimetatud üksusi, nagu inimeste nimed, organisatsioonid, kuupäevad, asukohad jne.

Järjendite märgistamiseks NER-is kasutatakse sageli BIO ja BIOES skeeme:

  • BIO (Begin, Inside, Outside): märgised näitavad, kas token on üksuse algus (B), üksuse sees (I) või üksusest väljaspool (O).
  • BIOES (Begin, Inside, Outside, End, Single): laiendatud skeem, kuhu lisatakse märgised üksuse lõppu (E) ja üksikutele tokenitele, mis esindavad üksusi (S). See aitab täpsemalt määratleda üksuste piire.

BIO ja BIOES skeemid aitavad mudelitel mõista nimetatud üksuste struktuuri ja piire tekstis.