A IA está respondendo errado: diagnóstico

Use este guia quando você precisar resolver ou investigar: A IA está respondendo errado: diagnóstico.

Quando usar este guia

Use quando a IA responde com informação incorreta, tom inadequado, excesso de confiança ou não transfere quando deveria.

Antes de começar

• Separe exemplos reais de respostas ruins.
• Defina qual seria a resposta correta.
• Tenha acesso às instruções, documentos e FAQs do assistente.
• Evite corrigir só a conversa; corrija a causa na base.

Diagnóstico passo a passo

1. Leia o histórico completo da conversa.
2. Classifique o erro: informação, tom, limite, base ausente, base contraditória ou falta de transferência.
3. Verifique se a informação correta existe nos documentos ou FAQs.
4. Procure documentos conflitantes ou desatualizados.
5. Revise a instrução do assistente para ver se o limite está claro.
6. Adicione exemplo de resposta desejada quando o tom estiver ruim.
7. Teste novamente com a pergunta original e com variações.

Como testar

• Repita a pergunta original.
• Faça a mesma pergunta com outras palavras.
• Teste uma pergunta fora do escopo.
• Teste pedido explícito por humano.

Problemas comuns e leitura do resultado

• Base de conhecimento incompleta.
• Documento antigo contradiz documento novo.
• Prompt permite responder quando deveria dizer que não sabe.
• IA não tem regra clara de transferência.
• Pergunta do cliente é ambígua e a IA não pergunta contexto.

Evidências para salvar

• Print da resposta errada.
• Resposta correta esperada.
• Documento ou FAQ que deveria sustentar a resposta.
• Link da conversa.
• Horário do teste.

Quando abrir chamado

• Abra chamado se a IA continua errando após base e instrução corrigidas.
• Abra chamado se a IA ignora regra explícita de transferência.
• Abra chamado se respostas mudam muito sem alteração de base.

Checklist final

• [ ] Canal, caixa de entrada ou assistente correto identificado.
• [ ] Teste controlado realizado com horário anotado.
• [ ] Prints e links relevantes salvos.
• [ ] Causa provável registrada.
• [ ] Chamado aberto apenas se o diagnóstico local não resolver.