Quiz: LLMs na Prática
Teste seu conhecimento sobre o uso de LLMs em aplicações do mundo real.
30 perguntas - Clique em cada pergunta para revelar a resposta correta.
Pergunta 1
O que é uma API no contexto de LLMs?
A) Um tipo de modelo de IA
B) Uma interface para aplicações se comunicarem com serviços de LLM
C) Uma linguagem de programação
D) Um recurso de segurança
Mostrar resposta
Resposta correta: B
Uma API (Interface de Programação de Aplicações) permite que aplicações se comuniquem com serviços de LLM, enviando requisições e recebendo respostas de forma programática.
Pergunta 2
Como um token se relaciona com palavras?
A) 1 token = exatamente 1 palavra
B) 1 token ≈ ¾ de uma palavra em média
C) 1 token = 10 palavras
D) Tokens e palavras não têm relação
Mostrar resposta
Resposta correta: B
Um token corresponde, em média, a cerca de ¾ de uma palavra. Palavras frequentemente são divididas em múltiplos tokens, especialmente as mais longas ou incomuns.
Pergunta 3
Por que tokens de saída custam mais do que tokens de entrada?
A) Eles têm qualidade superior
B) A geração exige mais computação do que a leitura
C) Decisão de marketing
D) Eles ocupam mais armazenamento
Mostrar resposta
Resposta correta: B
Gerar a saída exige mais recursos computacionais do que processar a entrada, pois o modelo precisa executar seu processo de predição para cada token.
Pergunta 4
O que é "alucinação" em LLMs?
A) Um bug visual na interface
B) Geração de informações plausíveis, mas falsas
C) Um tipo de estado de sonho
D) Um recurso para escrita criativa
Mostrar resposta
Resposta correta: B
Alucinação ocorre quando um LLM gera informações que parecem confiáveis e plausíveis, mas são factualmente incorretas ou inventadas.
Pergunta 5
O que é um "knowledge cutoff"?
A) Um recurso de segurança que limita o conhecimento
B) A data após a qual o modelo não possui dados de treinamento
C) Quando o modelo para de responder
D) Um limite no uso de tokens
Mostrar resposta
Resposta correta: B
O knowledge cutoff é a data além da qual o modelo não possui informações, pois seus dados de treinamento vão apenas até esse ponto.
Pergunta 6
Qual modelo seria mais econômico para perguntas simples de atendimento ao cliente?
A) GPT-4 Opus
B) Claude 3 Opus
C) GPT-3.5-turbo ou Claude Haiku
D) O mais caro disponível
Mostrar resposta
Resposta correta: C
Para tarefas simples, modelos mais baratos como GPT-3.5-turbo ou Claude Haiku geralmente são suficientes e muito mais econômicos do que modelos premium.
Pergunta 7
O que é um rate limit?
A) A velocidade com que o modelo "pensa"
B) Limites de requisições ou tokens por período de tempo
C) A pontuação de opinião do modelo
D) Uma classificação de qualidade
Mostrar resposta
Resposta correta: B
Rate limits restringem quantas requisições de API ou tokens você pode usar em um determinado período (por minuto, hora ou dia).
Pergunta 8
O que é RAG (Retrieval-Augmented Generation)?
A) Um tipo de modelo LLM
B) Conectar LLMs a bases de conhecimento para reduzir alucinação
C) Um modelo de precificação
D) Um framework de testes
Mostrar resposta
Resposta correta: B
RAG recupera documentos relevantes de uma base de conhecimento e os inclui no prompt, fundamentando a resposta do LLM em informações verificadas.
Pergunta 9
Por que um LLM pode fornecer informações incorretas sobre um evento de 2024?
A) Ele é programado para mentir
B) O evento pode ser posterior ao seu knowledge cutoff
C) Ele não processa eventos atuais
D) 2024 está muito distante no futuro
Mostrar resposta
Resposta correta: B
Se o evento ocorreu após o cutoff de treinamento do modelo, ele não possui informações sobre isso e pode alucinar detalhes incorretos.
Pergunta 10
O que diferencia o ChatGPT da API da OpenAI?
A) ChatGPT é para consumidores; API é para desenvolvedores
B) Eles usam modelos de IA diferentes
C) ChatGPT é gratuito; API é sempre paga
D) Não há diferença
Mostrar resposta
Resposta correta: A
O ChatGPT é um produto para consumidores com interface de chat, enquanto a API é projetada para desenvolvedores integrarem capacidades de LLM em aplicações.
Pergunta 11
Como você pode reduzir custos de API?
A) Usar o modelo mais caro
B) Escrever prompts mais longos
C) Otimizar prompts, escolher modelos adequados, usar cache
D) Fazer mais requisições
Mostrar resposta
Resposta correta: C
A otimização de custos inclui usar prompts concisos, escolher o modelo certo para a tarefa, cachear respostas frequentes e limitar o tamanho da saída.
Pergunta 12
Para que tipo de tarefa você NÃO deve confiar apenas em LLMs?
A) Brainstorming de escrita criativa
B) Diagnóstico médico
C) Rascunhos de e-mail
D) Explicação de código
Mostrar resposta
Resposta correta: B
Diagnóstico médico envolve riscos altos em caso de erro—saídas de LLM nunca devem ser a única base para decisões médicas sem verificação profissional.
Pergunta 13
O que é "temperature" em chamadas de API?
A) O calor do servidor
B) Uma configuração que controla a aleatoriedade da saída
C) A velocidade de geração
D) Um nível de preço
Mostrar resposta
Resposta correta: B
Temperature controla o quão aleatória ou determinística será a saída. Temperature baixa = previsível; temperature alta = mais variada e criativa.
Pergunta 14
Aproximadamente quantos tokens tem uma página de texto?
A) 50-100
B) 500-750
C) 5.000-7.500
D) 50.000
Mostrar resposta
Resposta correta: B
Uma página típica de texto possui aproximadamente 500-750 tokens, dependendo do conteúdo.
Pergunta 15
O que é uma chave de API?
A) Um atalho físico no teclado
B) Uma credencial para autenticar requisições de API
C) Um nome de modelo
D) Um plano de preços
Mostrar resposta
Resposta correta: B
Uma chave de API é uma credencial secreta que identifica e autentica sua aplicação ao fazer requisições para a API.
Pergunta 16
Por que LLMs soam confiantes mesmo quando estão errados?
A) Foram projetados para mentir
B) Eles predizem textos que soam prováveis, independentemente da precisão
C) Eles são sempre confiantes
D) Eles sabem que estão certos
Mostrar resposta
Resposta correta: B
LLMs geram textos que parecem prováveis com base em padrões, não na verdade. Respostas incorretas frequentemente soam tão confiantes quanto as corretas.
Pergunta 17
O que é streaming em respostas de API?
A) Geração de vídeo
B) Receber tokens de resposta à medida que são gerados
C) Cobrança contínua
D) Atualizações ao vivo do modelo
Mostrar resposta
Resposta correta: B
Streaming permite receber e exibir tokens conforme são gerados, em vez de esperar pela resposta completa.
Pergunta 18
O que você deve fazer antes de confiar em uma citação gerada por LLM?
A) Assumir que está correta
B) Verificar se ela existe e é precisa
C) Usar apenas se soar profissional
D) Verificar se o modelo é caro
Mostrar resposta
Resposta correta: B
LLMs frequentemente alucinam citações que não existem. Sempre verifique se as fontes citadas são reais e corretamente referenciadas.
Pergunta 19
Qual vantagem o Claude oferece para análise de documentos?
A) Preço mais barato
B) Janela de contexto muito grande (200K tokens)
C) Maior velocidade
D) Melhor em matemática
Mostrar resposta
Resposta correta: B
A janela de contexto do Claude pode lidar com até 200K tokens, permitindo processar documentos muito longos em um único prompt.
Pergunta 20
Qual é uma forma "no-code" de usar APIs de LLM?
A) Usando linha de comando
B) Ferramentas como Zapier que não exigem programação
C) Não existe forma sem código
D) Copiar e colar código
Mostrar resposta
Resposta correta: B
Ferramentas como Zapier, Make e o GPT Builder do ChatGPT permitem integração com LLMs sem escrever código.
Pergunta 21
O que pode causar um erro "429" em uma API?
A) Queda do servidor
B) Ultrapassar os rate limits
C) Senha incorreta
D) Modelo não encontrado
Mostrar resposta
Resposta correta: B
Um erro 429 normalmente significa "Muitas Requisições"—você atingiu o rate limit e precisa esperar antes de fazer novas requisições.
Pergunta 22
Por que modelos open-source podem ser preferidos em algumas aplicações?
A) Eles são sempre melhores
B) Privacidade (dados ficam locais) e ausência de custos de API
C) Eles são mais novos
D) São mais fáceis de usar
Mostrar resposta
Resposta correta: B
Modelos open-source podem rodar localmente, mantendo os dados privados e eliminando custos recorrentes de API (embora haja custos de hospedagem).
Pergunta 23
O que é a crítica do "papagaio estocástico" aos LLMs?
A) Eles fazem barulhos aleatórios
B) Repetem padrões sem compreensão real
C) São muito coloridos
D) Só funcionam em pares
Mostrar resposta
Resposta correta: B
A crítica do "papagaio estocástico" sugere que LLMs apenas repetem padrões dos dados de treinamento com variação estatística, sem entendimento genuíno.
Pergunta 24
O que é max_tokens em uma chamada de API?
A) Tamanho máximo do modelo
B) Comprimento máximo da resposta
C) Valor máximo de cobrança
D) Duração máxima da conversa
Mostrar resposta
Resposta correta: B
max_tokens limita o comprimento da resposta do modelo, ajudando a controlar custos e o tamanho da resposta.
Pergunta 25
Como o cache ajuda a reduzir custos de API?
A) Torna o modelo mais inteligente
B) Armazena e reutiliza respostas para consultas repetidas
C) Comprime tokens
D) Reduz o tamanho do modelo
Mostrar resposta
Resposta correta: B
O cache armazena respostas para consultas comuns, permitindo reutilizá-las sem fazer novas chamadas (pagas) à API.
Pergunta 26
Com que tipos de raciocínio LLMs têm dificuldade?
A) Perguntas simples
B) Matemática complexa e lógica de múltiplos passos
C) Tradução
D) Resumo
Mostrar resposta
Resposta correta: B
LLMs frequentemente têm dificuldade com cálculos matemáticos complexos e tarefas de raciocínio lógico de múltiplos passos.
Pergunta 27
Qual a diferença entre precificação de tokens de entrada e saída?
A) Não há diferença
B) Saída geralmente custa mais
C) Entrada sempre custa mais
D) Apenas saída é cobrada
Mostrar resposta
Resposta correta: B
Tokens de saída normalmente custam de 2 a 5 vezes mais do que tokens de entrada porque a geração exige mais computação.
Pergunta 28
O que desenvolvedores devem adicionar a aplicações que usam LLMs para tarefas importantes?
A) Mais modelos de IA
B) Revisão e verificação humana
C) Processamento mais rápido
D) Mais tokens
Mostrar resposta
Resposta correta: B
Para tarefas importantes ou de alto risco, a revisão humana das saídas dos LLMs ajuda a identificar erros e alucinações.
Pergunta 29
O que é um system prompt?
A) A primeira mensagem do usuário
B) Instruções ocultas que guiam o comportamento da IA
C) Uma mensagem de erro
D) O nome do modelo
Mostrar resposta
Resposta correta: B
Um system prompt contém instruções (geralmente ocultas dos usuários) que definem como a IA deve se comportar ao longo da conversa.
Pergunta 30
Por que é perigoso que LLMs possam gerar citações falsas?
A) Não é perigoso
B) Usuários podem confiar e espalhar afirmações acadêmicas falsas
C) Usa muitos tokens
D) Deixa o modelo mais lento
Mostrar resposta
Resposta correta: B
Citações falsas podem levar usuários a acreditar que informações incorretas são academicamente verificadas, potencialmente espalhando desinformação.
Resultados
| Pontuação | Nível |
|---|---|
| 27-30 | Excelente - Forte compreensão do uso prático de LLMs |
| 21-26 | Bom - Uma revisão pode ser útil |
| 15-20 | Médio - Revise os capítulos novamente |
| Abaixo de 15 | Precisa de revisão abrangente |