Qu'est-ce qu'Anserini et Pyserini?

Anserini est une bibliothèque open source pour la recherche d'informations (Information Retrieval), construite sur Apache Lucene. Elle fournit des outils pratiques pour construire des systèmes de recherche en texte intégral et expérimenter avec des tâches IR, y compris l'indexation et le classement de documents.

Pyserini est une enveloppe Python pour Anserini, permettant d'utiliser les fonctionnalités d'Anserini depuis du code Python. Pyserini est largement utilisé dans la recherche et le développement dans le domaine de l'IR et du NLP, facilitant l'intégration d'une recherche en texte intégral efficace dans des applications Python.

Les deux bibliothèques sont destinées à la communauté de recherche et supportent des méthodes de recherche modernes, y compris BM25, ainsi que l'intégration avec des modèles d'apprentissage profond pour améliorer la qualité du classement.