Évaluation de prompts
Évaluez vos prompts : introduction, évaluation par code, Promptfoo et techniques de notation avancée.
Objectifs pédagogiques
À l'issue de cette formation, vous serez capable de :
- Concevoir un jeu de test représentatif pour évaluer un prompt sur des critères objectifs
- Écrire des évaluations notées par code vérifiant automatiquement le format et le contenu des réponses
- Mesurer la performance d'une tâche de classification à l'aide de métriques exploitables
- Mettre en place une suite d'évaluations avec Promptfoo et des notateurs personnalisés
- Utiliser un modèle comme juge (LLM-as-judge) et en contrôler les biais de notation
Fiche pédagogique
- Public visé
- Développeurs, ingénieurs et intégrateurs souhaitant exploiter Claude par API dans leurs applications.
- Prérequis
- Pratique courante d'un langage de programmation, notions d'API REST et de format JSON.
- Durée
- 1h15 — 9 leçons
- Modalités
- Formation 100 % en ligne, en autonomie, accessible 24h/24 depuis un navigateur. Progression enregistrée, reprise possible à tout moment. Durée estimée : 1h15.
- Évaluation
- Exercices d'application proposés au fil des leçons. Chaque leçon se termine par ses points clés, support de l'auto-évaluation. Un quiz final de 5 questions corrigées, en fin de dernière leçon, permet de valider les acquis.
- Accessibilité
- Formation accessible aux personnes en situation de handicap : contenus textuels compatibles avec les lecteurs d'écran, navigation au clavier et contrastes conformes. Pour tout besoin d'adaptation, écrivez à [email protected].
- Tarif
- Gratuit — accès immédiat après inscription