Pular para o conteúdo principal

Veja quais cenários aparecem no seu tráfego.

Encontre cenários com tráfego, os que ainda estão sem atividade e traces sem correspondência. Depois, decida onde criar um teste.

Uma suíte de testes pode parecer saudável enquanto conversas reais ficam sem teste.

Alguns cenários aparecem em produção; outros não chegam a acontecer. Revise correspondências e lacunas para decidir o que testar.

Cenários cobertos

Um cenário condicional está coberto quando traces de produção classificados correspondem a ele na janela selecionada. Seu volume de tráfego não é uma taxa de aprovação nem uma pontuação de completude.

Cenários inativos

Cenários condicionais definidos sem tráfego correspondente continuam visíveis como sem tráfego. Eles podem ser casos extremos importantes ou simplesmente não terem sido observados durante a janela.

Traces sem correspondência

Um trace classificado que não corresponde a nenhum cenário condicional é um sinal concreto de uma possível lacuna. Revise-o e decida se a conversa merece um novo teste.

Priorize as lacunas de cobertura

Revise lacunas de tráfego dentro de um período definido.

  1. Fixe o período e a população

    Escolha um período e inspecione os traces capturados. Falhas na exportação de traces, amostragem e entrada ausente podem limitar as interações do relatório.

  2. Separe tráfego e resultados

    Inspecione cenários com correspondências, cenários sem tráfego e traces classificados sem correspondência. Um cenário com tráfego ainda pode ter verificações reprovadas.

  3. Escolha o próximo cenário

    Revise uma solicitação sem correspondência e decida se deve adicionar ou refinar um teste condicional. Investigue entradas ausentes e classificação indisponível separadamente.

Escolha o próximo teste pela cobertura de cenários

Coberto não significa aprovado

Um trace correspondente mostra que o cenário ocorreu. Abra os resultados para ver se passou nas verificações.

Sem correspondência não significa falha

Sem correspondência significa que o classificador não encontrou um cenário condicional para aquele trace. A Mibo mantém isso separado das falhas de verificação e identifica casos a considerar ao expandir a suíte.

Perguntas frequentes

O que significa coberto na Mibo?

Um cenário condicional está coberto quando um ou mais traces de produção classificados correspondem a ele durante a janela selecionada. Isso descreve o tráfego observado, não se as verificações foram aprovadas nem a cobertura completa de todas as interações possíveis.

Como a Mibo conecta cenários do agente ao tráfego real?

Seu sistema envia um trace de execução por OTLP. O Mibo classifica a entrada conforme os cenários condicionais, avalia as verificações aplicáveis e informa as correspondências em Scenario Coverage.

O que um trace sem correspondência diz à minha equipe?

Ele informa que um trace classificado não correspondeu a nenhum cenário condicional na janela selecionada. Isso é um convite para revisar a conversa e decidir se um teste deve ser adicionado ou refinado, não uma prova de que o agente falhou.

A Cobertura de cenários prova que meu agente está totalmente testado?

Não. A cobertura mostra o tráfego classificado em um período, não se as verificações passaram. Entradas sem classificação, evidências ausentes e casos não observados limitam o sinal.

Continue explorando