Pular para o conteúdo principal

Módulo 12: Avaliação e Testes de LLM

🎯 Objetivos de Aprendizagem​

  • Implementar frameworks automatizados de teste de LLM
  • Projetar pipelines de avaliação humana
  • Realizar testes de segurança e red teaming

📚 Conteúdo do Módulo​

Capítulo 1: Testes Automatizados de LLM​

Frameworks de teste de prompt, testes de regressão, conjuntos de dados de referência (golden datasets).

Capítulo 2: Pipelines de Avaliação Humana​

Plataformas de anotação, critérios de avaliação, concordância entre anotadores.

Capítulo 3: Testes de Segurança​

Red teaming, detecção de jailbreak, filtragem de conteúdo, benchmarks de segurança.

🚀 Vamos Começar!​

Comece pelo Capítulo 1: Testes Automatizados de LLM.