Pular para o conteúdo principal
Entrar Começar

Teste o que seu agente de IA diz e faz.

Confira se o agente responde e age como deveria. Comece com um trace registrado e crie testes a partir dele.

Começar grátisExplorar casos de teste

Uma resposta correta pode esconder uma ação errada

Defina o fluxo, os argumentos de ferramenta e a resposta esperados para uma solicitação. Verifique cada um: um agente pode escolher a rota correta e agir na conta errada.

Rota errada

Verifique se a solicitação chega ao especialista e ao fluxo corretos, não apenas se o endpoint responde.

Uso de ferramentas

Valide chamadas, argumentos e outros fatos observáveis no trace do agente.

Resposta incompleta

Avalie se a resposta é clara, segura e alinhada ao resultado de que seu cliente precisa.

Revise o contrato de comportamento

Defina um contrato e inspecione a execução.

  1. Defina o resultado esperado

    Especifique a ação permitida, os argumentos e o que a resposta pode afirmar. Inclua um caminho proibido e uma falha de ferramenta.

  2. Confira as evidências

    Inspecione a entrada, resposta, chamadas e resultados registrados. Confirme a captura dos campos exigidos antes de interpretar uma ausência.

  3. Transforme uma falha em teste

    Use IA para sugerir verificações a partir de um trace disponível, revise e salve. Avalie traces posteriores e compare uma execução correta com outra deliberadamente incorreta.

Veja o que aconteceu no trace

Verificações semânticas

Avalie significado, segurança, completude e alinhamento ao resultado descrito, sem exigir uma string fixa.

Verificações procedurais

Inspecione fatos da execução, como chamadas de ferramentas, argumentos, atributos, status HTTP e schema.

Perguntas frequentes

O que a Mibo testa em um agente de IA?

A Mibo avalia o comportamento que você descreve, incluindo a resposta e evidências observáveis da execução, como rotas, chamadas de ferramentas, valores e status. Verificações baseadas em regras validam fatos, enquanto verificações com IA pontuam respostas segundo critérios em linguagem natural.

Posso testar um agente antes e depois do lançamento?

Após uma interação, envie a execução registrada por OTLP. O Mibo avalia as verificações aplicáveis sem chamar o agente novamente.

A avaliação de traces coloca o Mibo no caminho da solicitação?

Não. Seu sistema processa a interação e depois envia um trace à Mibo. A Mibo avalia o trace de forma assíncrona em segundo plano.

Continue explorando