Pular para o conteúdo principal

A observabilidade mostra o que seu agente fez. Os testes dizem se ele agiu certo.

Teste seus agentes de IA com os traces que você já emite. Veja o que aconteceu na sua ferramenta de tracing e confira no Mibo se a execução violou alguma regra.

Duas perguntas sobre a mesma execução

Os traces fornecem as evidências de que seus testes salvos precisam para conferir as suas regras. No exemplo abaixo, o reembolso foi efetuado e a verificação da aprovação do gerente falhou.

ObservabilidadeTestes com o Mibo
Veja quais etapas rodaram e quais ferramentas o agente acionou.Confira se as ações registradas seguiram as suas regras.
Inspecione o trace para ver a sequência de eventos e os valores registrados.Veja o resultado da verificação e as evidências que o explicam.
Leia o trace para investigar o que aconteceu.Escolha um trace registrado. A IA sugere um teste para você revisar e salvar. O Mibo aplica o teste aos próximos traces elegíveis.
Colete e inspecione traces.Use esses traces como evidência nos testes.

Um reembolso visto de duas formas

Confira o que a resposta diz

Uma verificação semântica avalia se a resposta explica a política de aprovação.

Confira o que o agente fez

Uma verificação procedural usa o valor do reembolso e a etapa de aprovação registrados para checar a regra.

Envie uma única exportação para as duas ferramentas

Aponte o exportador OTLP/HTTP do agente para o OpenTelemetry Collector e configure os dois destinos. Ative a captura do conteúdo das mensagens para incluir entradas ou saídas utilizáveis nos spans. Execute o agente e confirme se o trace aparece no Mibo com as evidências necessárias antes de criar um rascunho de teste.

Veja as duas opções de configuração
receivers:
  otlp:
    protocols:
      http:
        endpoint: 127.0.0.1:4318
exporters:
  otlp_http/mibo:
    traces_endpoint: https://api.mibo-ai.com/public/traces
    headers:
      x-api-key: ${env:MIBO_API_KEY}
  otlp_http/other:
    traces_endpoint: '<YOUR_OTHER_OTLP_HTTP_TRACES_ENDPOINT>'
service:
  pipelines:
    traces:
      receivers: [otlp]
      exporters: [otlp_http/mibo, otlp_http/other]
Defina MIBO_API_KEY no ambiente do Collector. O outro destino pode precisar de credenciais próprias. 127.0.0.1 exige que a aplicação e o Collector compartilhem o mesmo namespace de rede. Ajuste os cabeçalhos do exportador para o Collector; variáveis de endpoint aceitam uma URL, não uma lista separada por vírgulas.

Cada ferramenta tem sua função

Mantenha os painéis de custo e latência na sua plataforma de observabilidade e o gerenciamento de prompts no seu fluxo de desenvolvimento. Seu aplicativo executa o agente e aplica as regras. O Mibo avalia os traces depois da execução, fora do fluxo da requisição.

Quando sua configuração atual já dá conta

Se suas avaliações já conferem nos traces de produção as regras de chamada de ferramentas que importam para você, pode continuar com a configuração atual.

Continue explorando