Welke frameworks worden gebruikt voor het bouwen van RAG?

Voor het bouwen van Retrieval-Augmented Generation (RAG) worden verschillende populaire frameworks en bibliotheken gebruikt die helpen bij het integreren van zoeken in de kennisbasis met tekstgeneratie. Onder hen:

• Hugging Face Transformers — biedt modellen voor tekstgeneratie en tools voor integratie met externe gegevensbronnen.
• FAISS (Facebook AI Similarity Search) — bibliotheek voor efficiënte zoekopdrachten in vectorrepresentaties van documenten.
• Haystack — framework voor het bouwen van zoek- en vraag-antwoord systemen, ondersteunt de RAG-benadering.
• LangChain — bibliotheek voor het maken van dataverwerkingsketens met LLM, inclusief RAG.

Meestal wordt RAG opgebouwd uit een combinatie van generatiemodellen (bijvoorbeeld GPT, BART) en systemen voor zoeken op basis van documentindexen, geïmplementeerd met deze frameworks.