Aller au contenu principal

L’observabilité montre ce que votre agent a fait. Les tests disent s’il a bien agi.

Testez vos agents IA à partir des traces que vous émettez déjà. Consultez le déroulement dans votre outil de traçage, puis vérifiez dans Mibo si l’exécution a enfreint une règle.

Deux questions sur la même exécution

Les traces donnent à vos tests enregistrés les éléments nécessaires pour vérifier vos règles. Dans l’exemple ci-dessous, le remboursement a bien été effectué et la vérification de l’approbation du responsable a échoué.

ObservabilitéTests avec Mibo
Voyez les étapes exécutées et les outils appelés par l’agent.Vérifiez que les actions enregistrées respectent vos règles.
Examinez la trace pour connaître l’ordre des événements et les valeurs enregistrées.Consultez le verdict et les éléments qui l’expliquent.
Lisez la trace pour comprendre ce qui s’est passé.Choisissez une trace enregistrée. L’IA propose un test à relire et à enregistrer. Mibo l’applique aux traces suivantes quand il s’y prête.
Collectez et examinez les traces.Appuyez vos tests sur les éléments relevés dans ces traces.

Un remboursement, deux points de vue

Vérifiez le contenu de la réponse

Une vérification sémantique évalue si la réponse explique la politique d’approbation.

Vérifiez les actions de l’agent

Une vérification procédurale s’appuie sur le montant enregistré et l’étape d’approbation pour vérifier la règle.

Un seul export pour deux destinations

Dirigez l’exportateur OTLP/HTTP de votre agent vers le collecteur OpenTelemetry et configurez les deux destinations. Activez la capture du contenu des messages pour inclure une entrée ou une sortie exploitable dans les spans. Exécutez l’agent et vérifiez que la trace apparaît dans Mibo avec les éléments nécessaires avant de rédiger un test.

Voir les deux options de configuration
receivers:
  otlp:
    protocols:
      http:
        endpoint: 127.0.0.1:4318
exporters:
  otlp_http/mibo:
    traces_endpoint: https://api.mibo-ai.com/public/traces
    headers:
      x-api-key: ${env:MIBO_API_KEY}
  otlp_http/other:
    traces_endpoint: '<YOUR_OTHER_OTLP_HTTP_TRACES_ENDPOINT>'
service:
  pipelines:
    traces:
      receivers: [otlp]
      exporters: [otlp_http/mibo, otlp_http/other]
Définissez MIBO_API_KEY dans l’environnement du Collector. L’autre destination peut nécessiter ses propres identifiants. Avec 127.0.0.1, l’application et le Collector doivent partager le même espace de noms réseau. Adaptez les en-têtes de l’exportateur au Collector ; les variables d’endpoint acceptent une URL, pas une liste séparée par des virgules.

À chaque outil son rôle

Gardez vos tableaux de bord de coûts et de latence dans votre plateforme d’observabilité et la gestion des prompts dans votre environnement de développement. Votre application exécute l’agent et fait respecter les règles. Mibo évalue les traces après l’exécution, en dehors du traitement de la requête.

Quand votre configuration actuelle suffit

Si vos évaluations vérifient déjà les règles d’appel d’outils qui comptent pour vous dans les traces de production, vous pouvez garder votre configuration.

Poursuivre la découverte