🥽 Analyse approfondie : Comprendre le rappel contextuel 🎯 dans les systèmes RAG

Définition et calcul

Le rappel contextuel mesure l'exhaustivité sémantique de votre système de récupération. Il est calculé en générant d'abord une liste d'affirmations ou de déclarations à partir du résultat attendu (Ground Truth) du système RAG.

À l'aide d'un LLM (généralement le même modèle que celui utilisé pour générer les réclamations), cette liste est mappée aux fragments réellement récupérés. L'objectif est de déterminer si les instructions générées à partir de la sortie attendue peuvent être sémantiquement satisfaites ou conclues à partir des morceaux récupérés.

La métrique est calculée comme suit :

Un score parfait implique que toutes les instructions du résultat attendu sont prises en charge par le contexte récupéré, qu'un seul morceau satisfasse plusieurs instructions ou que plusieurs morceaux satis...
[Courte citation de 8% de l'article original]