Pular para o conteúdo principal

Módulo 8 - Avaliação e Otimização

Visão geral​

Como saber se o seu sistema RAG está funcionando bem? Este módulo aborda métricas de avaliação, o framework RAGAS e técnicas de depuração.

Objetivos de aprendizagem​

  • Compreender as métricas de avaliação de RAG
  • Utilizar o framework RAGAS para avaliação automatizada
  • Depurar falhas comuns em RAG
  • Otimizar o desempenho do pipeline

Conteúdo do módulo​

1. Métricas de Avaliação de RAG​

  • Recuperação: recall, precisão, MRR
  • Geração: fidedignidade, relevância

2. Framework RAGAS​

  • Avaliação automatizada
  • Correção da resposta, métricas de contexto

3. Depuração de Pipelines RAG​

  • Falhas comuns e soluções
  • Rastreamento com LangSmith
  1. Métricas de Avaliação
  2. Framework RAGAS
  3. Depuração
  4. Quiz - Módulo 8 - 30 questões