Etudiant : LAKEHAL SALMA

Filière : Master Web Intelligence et Sciences des Données (WISD)

Encadrant : Pr. YAHYAOUYI ALI

Annèe : 2026

Résumé : Ce projet de stage a pour objectif d’étudier et d’améliorer un framework d’évaluation de systèmes Retrieval-Augmented Generation (RAG) reposant sur la Conformal Prediction, afin de fournir des garanties statistiques sur les réponses générées. Les travaux ont consisté à analyser le framework TRAQ, à proposer une approche basée sur les embeddings sémantiques en remplacement du Natural Language Inference (NLI) pour réduire le coût computationnel, ainsi qu’à étudier une métrique d’entropie permettant de caractériser la diversité des ensembles prédictifs. Les expérimentations menées ont permis d'évaluer l'impact de ces contributions sur la couverture, la compacité et la diversité des réponses générées.