Etudiant : EL YAGOUBY MOHAMED AMINE

Filière : Master Web Intelligence et Sciences des Données (WISD)

Encadrant : Pr. YAHYAOUYI ALI

Annèe : 2024

Résumé : La génération augmentée par la recherche (RAG) s’attaque aux limitations des grands modèles de langage (LLM) comme les coupures de connaissances et les hallucinations en intégrant des mécanismes de recherche d’information qui accèdent à des sources externes. L'évaluation des systèmes RAG est complexe, les méthodes actuelles d’évaluation utilisent des ensembles de données question-réponse et deux principales approches : l'utilisation de LLM comme juge, coûteuse et peu explicable, et des scores ROUGE, pénalisant les réponses correctes mais différemment formulées. Cette étude vise à créer un nouveau Framework d'évaluation propose une méthode plus efficace, reliant la performance de la recherche d’information à celle du RAG, réduisant ainsi les coûts et améliorant la robustesse de l'évaluation.