Comprueba qué dice la respuesta
Una comprobación semántica evalúa si la respuesta explica la política de aprobación.
Prueba tus agentes de IA con las trazas que ya emites. Consulta lo que ocurrió en tu herramienta de trazas y comprueba en Mibo si la ejecución incumplió alguna regla.
Las trazas aportan los datos que necesitan tus pruebas guardadas para comprobar tus reglas. En el ejemplo de abajo, el reembolso se realizó y falló la comprobación de la aprobación del responsable.
| Observabilidad | Pruebas con Mibo |
|---|---|
| Consulta qué pasos se ejecutaron y qué herramientas llamó el agente. | Comprueba si las acciones registradas respetaron tus reglas. |
| Inspecciona la traza para ver el orden de los eventos y los valores registrados. | Consulta el resultado y los datos que respaldan cada comprobación. |
| Lee la traza para investigar lo ocurrido. | Elige una traza registrada. La IA propone una prueba para que la revises y guardes. Mibo la ejecuta en las trazas posteriores que correspondan. |
| Recoge y examina trazas. | Usa esas trazas como evidencia para tus pruebas. |
Una comprobación semántica evalúa si la respuesta explica la política de aprobación.
Una comprobación procedimental verifica la regla con el importe registrado y el paso de aprobación.
Apunta el exportador OTLP/HTTP de tu agente al Collector de OpenTelemetry y configura los dos destinos. Activa la captura del contenido de los mensajes para que los spans incluyan entradas o salidas utilizables. Ejecuta el agente y comprueba que la traza aparece en Mibo con los datos que necesitas antes de redactar una prueba.
Ver ambas opciones de configuraciónreceivers:
otlp:
protocols:
http:
endpoint: 127.0.0.1:4318
exporters:
otlp_http/mibo:
traces_endpoint: https://api.mibo-ai.com/public/traces
headers:
x-api-key: ${env:MIBO_API_KEY}
otlp_http/other:
traces_endpoint: '<YOUR_OTHER_OTLP_HTTP_TRACES_ENDPOINT>'
service:
pipelines:
traces:
receivers: [otlp]
exporters: [otlp_http/mibo, otlp_http/other]Mantén los paneles de coste y latencia en tu plataforma de observabilidad y la gestión de prompts en tu entorno de desarrollo. Tu aplicación ejecuta el agente y hace cumplir sus reglas. Mibo evalúa las trazas después de la ejecución, fuera del flujo de la solicitud.
Si tus evaluaciones ya comprueban en producción las reglas de llamadas a herramientas que te importan, puedes seguir con tu configuración actual.
Descubre cómo una prueba creada a partir de una ejecución registrada se aplica a futuras trazas dentro de los límites del plan.
Explorar las pruebas de agentes de IADescubre cómo usan las comprobaciones semánticas y procedimentales los datos registrados.
Explorar la evaluación