E · Embedding · évaluation · EU AI Act
Evaluation
Mesurer la qualité de réponse d'une IA sur un jeu curaté de questions avant publication.
En une phrase
L'évaluation est la pratique consistant à faire tourner un système IA sur un jeu curaté de questions représentatives, à noter ses réponses contre une référence et à bloquer les décisions de mise en production sur le résultat.
Quand ça compte
Chaque fois que vous changez le retriever, le reranker, le modèle d'embedding ou le system prompt — sans évaluation, vous shippez des régressions à l'aveugle.
Un exemple réel
helpcode ajuste l'hybrid retrieval par tenant en validant contre 50-100 questions réelles fournies par le client ; l'équipe ne ship que les changements qui améliorent rappel + précision sur le jeu d'eval.
Curé par helpcode research team · Dernière révision 2026-05-22