Module 12 : Évaluation et Test des LLM
🎯 Objectifs d'apprentissage
- Mettre en œuvre des cadres de test automatisés pour les LLM
- Concevoir des pipelines d'évaluation humaine
- Effectuer des tests de sécurité et des exercices de red teaming
📚 Contenu du module
Chapitre 1 : Test automatisé des LLM
Cadres de test de prompt, tests de régression, ensembles de données de référence.
Chapitre 2 : Pipelines d'évaluation humaine
Plateformes d'annotation, critères d'évaluation, accord inter-annotateurs.
Chapitre 3 : Test de sécurité
Red teaming, détection de jailbreak, filtrage de contenu, benchmarks de sécurité.
🚀 Commençons !
Commencez par Chapitre 1 : Test automatisé des LLM.