Saltar al contenido principal

Módulo 8: RLHF y Alineamiento

Haciendo que los LLM sean útiles, inofensivos y honestos.

Objetivos de aprendizaje​

  • ✅ Comprender el pipeline de RLHF y los modelos de recompensa
  • ✅ Aprender el enfoque de Constitutional AI
  • ✅ Abordar los desafíos de seguridad y alineamiento

Capítulos​

  1. RLHF: Pipeline, modelos de recompensa, entrenamiento PPO
  2. Constitutional AI: Entrenamiento basado en principios
  3. Seguridad y alineamiento: Jailbreaking, ataques adversarios, investigación en curso