Avaliação de qualidade e feedback das respostas
O Omnifox pontua as respostas do agente e sinaliza as fracas; revise-as e deixe seu feedback humano.
Veja este passo no vídeo · Qualidade das respostas
O que é a avaliação de qualidade
O Omnifox revisa automaticamente as respostas dos seus agentes de IA com um juiz de qualidade (outra IA que as pontua), para que você detecte respostas fracas ou arriscadas sem ler cada conversa manualmente. Cada resposta recebe uma pontuação geral dividida em quatro dimensões: relevância, segurança, coerência e utilidade. As que ficam abaixo do limite são sinalizadas para revisão.
Como abrir o painel de Qualidade
- No menu lateral entre em Agentes de IA.
- Abra a seção Qualidade (página
/ai-agents/{id}/quality). - No topo você verá os totais: respostas avaliadas, % sinalizadas, % revisadas e pontuação geral média, junto ao limite de sinalização vigente.
Como revisar e dar feedback
- Use os filtros: por agente, por intervalo (1 dia, 7 dias, 30 dias ou tudo) e o botão Somente sinalizadas para focar no mais urgente.
- Abra uma resposta para ver o detalhamento por dimensão e o comentário do juiz.
- Clique em Revisar e defina seu veredito humano: boa, má ou neutra. Você pode adicionar um comentário explicando o motivo.
- Salve. Sua decisão fica registrada e soma ao % revisadas.
Esse feedback humano é valioso: confirma (ou corrige) o juiz automático e revela padrões para melhorar as instruções do agente.
Como conferir se está funcionando
Após algumas horas de tráfego, volte ao painel: você deve ver respostas avaliadas e, se houve casos fracos, algumas sinalizadas. Ative Somente sinalizadas e confirme que consegue abrir e avaliar cada uma.
Se não funcionar
- Sem respostas avaliadas: o agente ainda não gerou respostas nesse intervalo, ou a avaliação está em processamento. Amplie o intervalo para 30 dias.
- Sinalizadas demais: costuma ser problema de instruções ou base de conhecimento, não do juiz. Leia 5–10 casos sinalizados e procure o padrão.
- Seção Qualidade não aparece: você precisa da permissão
ai-agents.view.
Dica: dedique 10 minutos por dia a revisar somente as sinalizadas. É a forma mais rápida de elevar a qualidade real do agente.
Dica: quando marcar várias respostas como "má" pelo mesmo motivo, edite as instruções do agente e meça de novo uma semana depois.
Artigos relacionados
Artigos relacionados
-
Crie seu primeiro agente de IA
Aprenda o que um agente de IA faz no Omnifox, como dar instrucoes, conecta-lo a um canal e testa-lo no sandbox antes de falar com clientes reais.
-
Como escrever boas instruções para seu agente de IA
Aprenda a redigir instruções claras para que seu agente de IA responda com o tom, os limites e as ações corretas.
-
Guia completo dos Agentes de IA
Os Agentes de IA a fundo, em 65 capítulos: criar, instruções, ferramentas, conhecimento, comportamento, teste, caixa de entrada, fluxos, análise e consumo, com cada opção explicada.
-
Conectar seu agente de IA ao WhatsApp, Instagram, Messenger e chat do site
Um agente sem canais não atende ninguém. Conecte-o ao seu WhatsApp, Instagram, Messenger ou ao chat do seu site na seção Conexões e ative-o para ele começar a responder.
-
Comece aqui: os Agentes de IA em 8 minutos
O essencial dos Agentes de IA em um vídeo curto: criar um agente, as instruções, ferramentas, conhecimento, canais, o teste, o horário e a passagem para uma pessoa.