Trazas de producción
Envía una traza canónica con la interacción, la respuesta y los detalles de ejecución después de una solicitud real mediante OpenTelemetry o la ruta Tu API de Mibo.
Mibo monitoriza el comportamiento que tus usuarios encuentran en producción.
Mibo evalúa las trazas de producción frente a las pruebas activas que defines, conserva evidencia asíncrona para investigar y permanece fuera del recorrido de la solicitud del cliente.
El tiempo de actividad puede mostrar un endpoint saludable aunque el agente se comporte mal.
Una solicitud puede terminar correctamente mientras el agente deriva al especialista equivocado, llama a una herramienta con argumentos inseguros o da una respuesta incompleta. Mibo convierte la traza de producción en evidencia investigable, en lugar de tratar la disponibilidad como prueba de un comportamiento fiable.
Evidencia asíncrona
Mibo almacena la traza y programa en segundo plano las pruebas activas aplicables. La evaluación pasiva no envía otra solicitud a tu sistema.
Comprobaciones configuradas
Revisa el comportamiento semántico y hechos procedimentales como llamadas a herramientas, argumentos, estado, esquema, tokens y tiempo de respuesta cuando la traza incluye los campos necesarios.
Un ciclo de monitorización para investigar regresiones del agente
Mantén la evaluación de producción separada de la interacción del cliente y haz visibles la evidencia y sus límites para el equipo responsable del agente.
01
Captura la interacción
Tu sistema atiende la solicitud del usuario y después envía a Mibo la traza canónica con la entrada, la salida y los detalles de ejecución disponibles para evaluar.
02
Evalúa fuera del recorrido de la solicitud
Mibo almacena la traza y la evalúa de forma asíncrona frente a las pruebas activas aplicables. La respuesta de ingesta no espera a que termine la evaluación.
03
Investiga una regresión
Compara los resultados a lo largo del tiempo y abre la evidencia detrás de un fallo. Usa los hallazgos para priorizar una corrección; Mibo no repara el agente automáticamente.
Sigue una regresión desde el comportamiento hasta la evidencia de ejecución
Comprobaciones de comportamiento
Las comprobaciones semánticas con IA comparan la respuesta con criterios que describes, como fundamentación, integridad, seguridad o alineación. Aportan evidencia para investigar, no garantizan la verdad ni la calidad general.
Comprobaciones de ejecución
Las comprobaciones deterministas inspeccionan hechos registrados como llamadas a nodos o herramientas, argumentos, atributos, estado HTTP, esquema, uso de tokens y tiempo de respuesta. Los campos ausentes se informan como instrumentación faltante, no como aprobación o fallo silencioso.
Preguntas frecuentes
¿Por qué la monitorización del tiempo de actividad no basta para los agentes de IA?
Un agente puede devolver una respuesta HTTP exitosa y aun así elegir la herramienta equivocada, inventar un resultado o dar una respuesta incompleta. Mibo evalúa el comportamiento configurado y la evidencia de la traza, no solo si el endpoint estaba disponible.
¿Qué ocurre cuando una traza pasiva llega a Mibo?
Tu sistema envía una traza canónica después de la interacción. Mibo la almacena, encuentra las pruebas activas aplicables y la evalúa de forma asíncrona en segundo plano. La evaluación pasiva no vuelve a llamar a tu agente.
¿La monitorización pasiva añade Mibo al recorrido de la solicitud del cliente?
No. Tu sistema atiende primero la solicitud del cliente y envía la traza a Mibo por separado. La respuesta de ingesta es independiente de la evaluación en segundo plano.
¿Mibo puede garantizar una cobertura completa o corregir regresiones automáticamente?
No. Mibo evalúa las pruebas activas y los campos de traza disponibles. Los casos límite no observados, los criterios estrechos, la clasificación no disponible y la instrumentación faltante pueden limitar la señal, y Mibo no repara el agente automáticamente.
¿Cómo gestiona Mibo la privacidad de las trazas?
Las cargas de las trazas están cifradas en reposo y el acceso del producto está limitado a la cuenta propietaria. Envía datos sintéticos o gobernados de forma adecuada según tus propios requisitos de privacidad.
Sigue investigando
Documentación de pruebas pasivas
Consulta las rutas de trazas compatibles, la evaluación asíncrona, el comportamiento pasivo y los límites de instrumentación faltante.
Leer la documentación →Referencia de trazas canónicas
Consulta los campos y atributos que Mibo puede usar para la evaluación semántica y procedimental.
Leer la referencia de trazas →Evaluación de agentes de IA
Entiende las comprobaciones semánticas y procedimentales de las ejecuciones activas y las trazas pasivas.
Explorar evaluación →Pruebas de agentes de IA
Define escenarios, ejecuta comprobaciones activas antes del lanzamiento y reutilízalas para las trazas de producción.
Explorar pruebas de agentes →Cobertura de pruebas de agentes de IA
Separa el tráfico observado de escenarios inactivos y sin coincidencia sin tratar la cobertura como prueba de calidad.
Explorar cobertura →Pruebas de regresión de agentes de IA
Conecta las comprobaciones deliberadas antes del lanzamiento con la evaluación de trazas de producción disponibles después de interacciones reales.
Explorar pruebas de regresión →Mibo en acción
Ejecuta la comprobación de fiabilidad en vivo con una solicitud sintética de cliente.
Ejecutar comprobación →Cómo probar agentes de IA
Sigue un flujo práctico para pruebas activas, trazas pasivas y límites de interpretación.
Leer la guía →