Confira o que a resposta diz
Uma verificação semântica avalia se a resposta explica a política de aprovação.
Teste seus agentes de IA com os traces que você já emite. Veja o que aconteceu na sua ferramenta de tracing e confira no Mibo se a execução violou alguma regra.
Os traces fornecem as evidências de que seus testes salvos precisam para conferir as suas regras. No exemplo abaixo, o reembolso foi efetuado e a verificação da aprovação do gerente falhou.
| Observabilidade | Testes com o Mibo |
|---|---|
| Veja quais etapas rodaram e quais ferramentas o agente acionou. | Confira se as ações registradas seguiram as suas regras. |
| Inspecione o trace para ver a sequência de eventos e os valores registrados. | Veja o resultado da verificação e as evidências que o explicam. |
| Leia o trace para investigar o que aconteceu. | Escolha um trace registrado. A IA sugere um teste para você revisar e salvar. O Mibo aplica o teste aos próximos traces elegíveis. |
| Colete e inspecione traces. | Use esses traces como evidência nos testes. |
Uma verificação semântica avalia se a resposta explica a política de aprovação.
Uma verificação procedural usa o valor do reembolso e a etapa de aprovação registrados para checar a regra.
Aponte o exportador OTLP/HTTP do agente para o OpenTelemetry Collector e configure os dois destinos. Ative a captura do conteúdo das mensagens para incluir entradas ou saídas utilizáveis nos spans. Execute o agente e confirme se o trace aparece no Mibo com as evidências necessárias antes de criar um rascunho de teste.
Veja as duas opções de configuraçãoreceivers:
otlp:
protocols:
http:
endpoint: 127.0.0.1:4318
exporters:
otlp_http/mibo:
traces_endpoint: https://api.mibo-ai.com/public/traces
headers:
x-api-key: ${env:MIBO_API_KEY}
otlp_http/other:
traces_endpoint: '<YOUR_OTHER_OTLP_HTTP_TRACES_ENDPOINT>'
service:
pipelines:
traces:
receivers: [otlp]
exporters: [otlp_http/mibo, otlp_http/other]Mantenha os painéis de custo e latência na sua plataforma de observabilidade e o gerenciamento de prompts no seu fluxo de desenvolvimento. Seu aplicativo executa o agente e aplica as regras. O Mibo avalia os traces depois da execução, fora do fluxo da requisição.
Se suas avaliações já conferem nos traces de produção as regras de chamada de ferramentas que importam para você, pode continuar com a configuração atual.
Veja como um teste criado a partir de uma execução registrada verifica os próximos traces dentro dos limites do plano.
Explore os testes de agentes de IAVeja como as verificações semânticas e procedurais usam os dados registrados.
Explore a avaliação