Módulo 12: Evaluación y pruebas de LLM
🎯 Objetivos de aprendizaje
- Implementar marcos de pruebas automatizadas para LLM
- Diseñar pipelines de evaluación humana
- Realizar pruebas de seguridad y red teaming
📚 Contenido del módulo
Capítulo 1: Pruebas automatizadas de LLM
Marcos de pruebas de prompt, pruebas de regresión, conjuntos de datos de referencia (golden datasets).
Capítulo 2: Pipelines de evaluación humana
Plataformas de anotación, criterios de evaluación, acuerdo entre anotadores.
Capítulo 3: Pruebas de seguridad
Red teaming, detección de jailbreak, filtrado de contenido, benchmarks de seguridad.
🚀 ¡Comencemos!
Empiece con Capítulo 1: Pruebas automatizadas de LLM.