Saltar al contenido principal

Comprueba el comportamiento de tu agente en producción.

Un endpoint puede estar disponible mientras su agente elige la herramienta equivocada. Evalúa trazas de producción para investigar su comportamiento.

Sigue una interacción en producción

Comprobaciones semánticas

Comprueba si la respuesta coincide con el resultado registrado. Para una consulta de pedido, un timeout no respalda la afirmación de que se envió.

Comprobaciones procedimentales

Revisa el resultado y la duración de la consulta detrás de la respuesta. Confirma que la traza capturó la llamada relevante antes de interpretar un resultado ausente.

Encuentra las lagunas detrás de los fallos

Separa las trazas que coinciden con un escenario de las solicitudes que necesitan clasificación o una prueba nueva.

Muestra de producción sintética 7 días · 12 trazas capturadas
Clasificación de trazasTrazas únicasQué investigar
Coinciden con un escenario 8 Abre los resultados de las comprobaciones; una coincidencia no es una aprobación.
Sin escenario coincidente 2 Revisa las solicitudes y decide si añadir o ajustar un escenario.
Sin entrada 1 Revisa la instrumentación antes de interpretar la cobertura de escenarios.
Clasificación no disponible 1 Investiga por qué no se pudo clasificar; no lo cuentes como aprobado.

Cancelación coincidió con 5 trazas y estado del pedido con 4; una traza coincidió con ambos. Son 9 coincidencias de escenario en 8 trazas únicas. Revisión de reembolso no tuvo tráfico. Los recuentos describen esta muestra, no todas las interacciones de producción.

Revisa la cobertura de escenarios

Elige la siguiente traza que revisar

El último resultado de cada prueba indica por dónde empezar. No describe todas las ejecuciones del período.

Matriz sintética de últimos resultados
EscenarioResultados por etapaMotivo de investigación
Cancelación
Enrutamiento
APROBADO
Argumentos
FALLIDO
La herramienta recibió la cuenta 4821; la solicitud correspondía a la cuenta 4812.
Estado del pedido
Herramienta
FALLIDO
Respuesta
FALLIDO
La consulta agotó el tiempo de espera, pero la respuesta afirmó que el pedido se había enviado.
Revisión de reembolso
Herramienta
SIN DATOS
Respuesta
SIN DATOS
No hay resultado para esta prueba. Recoge una traza relevante antes de valorar esta prueba.

Abre la traza, compara la comprobación con su evidencia y confirma que se capturaron los campos necesarios antes de decidir una corrección.

Una respuesta exitosa oculta una consulta fallida

Investigación de producción sintética

Expectativa
El agente debe consultar el estado del pedido antes de afirmar que se envió.
Ejecución registrada
La consulta del pedido agota el tiempo de espera. Aun así, la respuesta dice que se envió. El endpoint del cliente respondió con éxito.
Resultado
La afirmación de finalización contradice el resultado registrado. Investiga el criterio de respuesta y la gestión del timeout.
Siguiente investigación
Revisa otras trazas de estado de pedidos del mismo período. Este ejemplo no establece la frecuencia del fallo.

Preguntas frecuentes

¿Por qué la monitorización del tiempo de actividad no basta para los agentes de IA?

Un agente puede devolver una respuesta HTTP exitosa y aun así elegir la herramienta equivocada, inventar un resultado o dar una respuesta incompleta. Mibo evalúa el comportamiento configurado y la evidencia de la traza, no solo si el endpoint estaba disponible.

¿Qué ocurre cuando una traza llega a Mibo?

Después de una interacción, envía su ejecución registrada por OTLP. Mibo evalúa las comprobaciones configuradas aplicables sin volver a llamar al agente.

¿La evaluación de trazas añade Mibo al recorrido de la solicitud?

No. Tu sistema atiende primero la solicitud del cliente y envía la traza a Mibo por separado. La respuesta de ingesta es independiente de la evaluación en segundo plano.

¿Mibo puede garantizar una cobertura completa o corregir regresiones automáticamente?

No. La cobertura depende de las comprobaciones, la clasificación y la evidencia capturada. Mibo no corrige regresiones automáticamente.

¿Cómo gestiona Mibo la privacidad de las trazas?

Las cargas de las trazas están cifradas en reposo y el acceso del producto está limitado a la cuenta propietaria. Envía datos sintéticos o gobernados de forma adecuada según tus propios requisitos de privacidad.

Sigue investigando