Mibo associe l’évaluation active avant la mise en production à l’évaluation passive de traces réelles après le lancement, afin que les équipes puissent examiner la qualité sémantique, les preuves procédurales et les limites de chaque signal.
Mibo transforme le comportement attendu de l’agent en preuves que vous pouvez examiner, au lieu de considérer une réponse HTTP réussie comme la preuve que l’interaction était fiable.
Les vérifications assistées par IA de Mibo comparent le sens de la réponse aux critères que vous décrivez, comme la fidélité aux sources, l’exhaustivité, la sécurité ou l’alignement. Elles évaluent la réponse fournie, sans établir la vérité ni garantir à elles seules la qualité.
Les vérifications déterministes de Mibo examinent des faits observables tels que les appels de nœuds ou d’outils, les arguments, les attributs, le statut HTTP, le schéma et le temps de réponse. Un champ absent de la trace est signalé comme une instrumentation manquante plutôt que validé silencieusement.
Après une interaction réelle, votre système peut envoyer une trace pour une évaluation asynchrone avec les tests actifs applicables. Les résultats passifs couvrent ce que vous envoyez et ce que vos tests peuvent observer, pas toutes les conversations possibles.
Utilisez les mêmes attentes lors d’une exécution active contrôlée et dans les traces passives, tout en gardant visibles leurs preuves et leurs limites.
01
Décrivez le scénario et les vérifications importantes, notamment les critères sémantiques et les faits d’exécution observables comme un appel d’outil obligatoire ou un statut.
02
Choisissez un scénario, envoyez-le à l’agent connecté et examinez la réponse avec ses preuves d’exécution avant la mise en production. Les exécutions actives ne prouvent pas les cas non observés.
03
Envoyez une trace canonique après une interaction réelle. Mibo la stocke et l’évalue de manière asynchrone avec les tests actifs applicables, hors du parcours de la requête client ; des champs absents peuvent limiter le résultat.
Utilisez des critères en langage naturel pour évaluer le sens, la sécurité, l’exhaustivité et l’alignement. Le résultat dépend de la réponse et du contexte fournis : il s’agit d’une preuve à examiner, pas d’une garantie automatique de qualité.
Examinez les appels d’outils ou de nœuds, les arguments, les attributs, le statut HTTP, le schéma et le temps avec des vérifications déterministes. Ces signaux sont limités par l’instrumentation et les champs présents dans la réponse active ou la trace passive.
Mibo évalue le comportement que vous décrivez, notamment le sens de la réponse et les preuves d’exécution observables comme le routage, les appels d’outils, les valeurs, le statut, le schéma et le temps. Les vérifications sémantiques évaluent des critères en langage naturel ; les vérifications procédurales confirment les faits enregistrés. Aucune ne prouve toutes les interactions possibles ni ne garantit la qualité globale.
Oui. L’évaluation active envoie les scénarios choisis à un agent connecté en préproduction ou en production afin que vous puissiez examiner la réponse et les preuves d’exécution. Vous pouvez réutiliser les mêmes définitions de test pour l’évaluation passive lorsque des traces d’interactions réelles arrivent.
Votre système envoie une trace après l’interaction. Mibo la stocke, identifie les tests actifs applicables et l’évalue de manière asynchrone en arrière-plan, sans ajouter de requête au parcours client.
Non. Mibo évalue les vérifications configurées à partir des réponses et des traces disponibles. Des critères trop étroits, des cas limites non observés, une classification indisponible et une instrumentation manquante peuvent limiter le signal ; les exécutions actives et les traces passives doivent donc être examinées ensemble.
Utilisez la documentation maintenue pour définir les scénarios, les entrées, les vérifications et le comportement passif.
Lire la documentation →Définissez des scénarios, lancez des vérifications actives avant la mise en production et réutilisez-les pour évaluer les traces passives de production.
Découvrir les tests d’agents →Transformez les attentes réelles envers l’agent en scénarios concrets avec des vérifications sémantiques et procédurales à exécuter et à examiner.
Découvrir les cas de test →Testez le comportement lié à la sécurité avant la mise en production et examinez des preuves délimitées d’interactions réelles.
Découvrir les tests de sécurité →Distinguez le trafic observé des scénarios inactifs et sans correspondance sans traiter la couverture comme une preuve de qualité.
Découvrir la couverture →Reliez les vérifications délibérées avant la mise en production à l’évaluation des traces disponibles après des interactions réelles.
Découvrir les tests de régression →Suivez une méthode pratique pour les cas de test, les exécutions actives, les traces passives et les limites d’interprétation.
Lire le guide →Évaluez à partir de traces réelles le comportement rencontré par les utilisateurs en production et étudiez les régressions.
Découvrir le monitoring →Choisissez des métriques de comportement et de réponse sans masquer leurs limites d’interprétation.
Découvrir les métriques →Lancez la vérification de fiabilité en direct avec une demande client synthétique.
Lancer une vérification →