Какво са Anserini и Pyserini?

Anserini е библиотека с отворен код за информационно търсене (Information Retrieval), изградена върху Apache Lucene. Тя предоставя удобни инструменти за създаване на системи за пълнотекстово търсене и експерименти с IR задачи, включително индексиране и класиране на документи.

Pyserini е обвивка за Python над Anserini, която позволява използването на възможностите на Anserini от Python код. Pyserini се използва широко в изследванията и разработките в областта на IR и NLP, улеснявайки лесната интеграция на ефективно пълнотекстово търсене в Python приложения.

И двете библиотеки са насочени към изследователската общност и поддържат съвременни методи за търсене, включително BM25, както и интеграция с модели за дълбоко обучение за подобряване на качеството на класиране.