Vérifiez le contenu de la réponse
Une vérification sémantique évalue si la réponse explique la politique d’approbation.
Testez vos agents IA à partir des traces que vous émettez déjà. Consultez le déroulement dans votre outil de traçage, puis vérifiez dans Mibo si l’exécution a enfreint une règle.
Les traces donnent à vos tests enregistrés les éléments nécessaires pour vérifier vos règles. Dans l’exemple ci-dessous, le remboursement a bien été effectué et la vérification de l’approbation du responsable a échoué.
| Observabilité | Tests avec Mibo |
|---|---|
| Voyez les étapes exécutées et les outils appelés par l’agent. | Vérifiez que les actions enregistrées respectent vos règles. |
| Examinez la trace pour connaître l’ordre des événements et les valeurs enregistrées. | Consultez le verdict et les éléments qui l’expliquent. |
| Lisez la trace pour comprendre ce qui s’est passé. | Choisissez une trace enregistrée. L’IA propose un test à relire et à enregistrer. Mibo l’applique aux traces suivantes quand il s’y prête. |
| Collectez et examinez les traces. | Appuyez vos tests sur les éléments relevés dans ces traces. |
Une vérification sémantique évalue si la réponse explique la politique d’approbation.
Une vérification procédurale s’appuie sur le montant enregistré et l’étape d’approbation pour vérifier la règle.
Dirigez l’exportateur OTLP/HTTP de votre agent vers le collecteur OpenTelemetry et configurez les deux destinations. Activez la capture du contenu des messages pour inclure une entrée ou une sortie exploitable dans les spans. Exécutez l’agent et vérifiez que la trace apparaît dans Mibo avec les éléments nécessaires avant de rédiger un test.
Voir les deux options de configurationreceivers:
otlp:
protocols:
http:
endpoint: 127.0.0.1:4318
exporters:
otlp_http/mibo:
traces_endpoint: https://api.mibo-ai.com/public/traces
headers:
x-api-key: ${env:MIBO_API_KEY}
otlp_http/other:
traces_endpoint: '<YOUR_OTHER_OTLP_HTTP_TRACES_ENDPOINT>'
service:
pipelines:
traces:
receivers: [otlp]
exporters: [otlp_http/mibo, otlp_http/other]Gardez vos tableaux de bord de coûts et de latence dans votre plateforme d’observabilité et la gestion des prompts dans votre environnement de développement. Votre application exécute l’agent et fait respecter les règles. Mibo évalue les traces après l’exécution, en dehors du traitement de la requête.
Si vos évaluations vérifient déjà les règles d’appel d’outils qui comptent pour vous dans les traces de production, vous pouvez garder votre configuration.
Voyez comment un test issu d’une exécution enregistrée s’applique aux traces suivantes dans les limites de votre offre.
Découvrir les tests d’agents IAVoyez comment les vérifications sémantiques et procédurales exploitent les éléments enregistrés.
Découvrir l’évaluation