Identifique e priorize falhas de qualidade específicas detectadas durante uma execução de avaliação, organizadas por gravidade. Use a gravidade do problema e a relevância da métrica para decidir quais falhas resolver antes da implantação.
Antes de Iniciar
Função necessária: sn_aia.admin
Procedimento
-
Navegar até .
-
Na lista, selecione a avaliação automatizada que você deseja revisar.
A página de detalhes da avaliação é aberta, exibindo os resultados gerais e as métricas de desempenho.
-
Se algum problema for identificado, selecione Revise e otimize para exibir detalhes.
A configuração assistida de otimização é aberta para esse ativo de IA agentivo.
Cada problema está associado a uma ferramenta específica ou ativo de IA agentivo.
-
Na lista Problemas, selecione um problema para revisar.
Cada ocorrência tem uma descrição do problema, uma análise de causa raiz, rastreamentos associados a ele e um espaço para adicionar anotações sobre a análise.
|
Seção
|
Descrição
|
|
Pontuação do problema e descrição resumida
|
Uma breve visão geral do problema identificado e seu impacto no ativo de IA agentivo
|
|
Descrição
|
Informações mais detalhadas sobre o problema identificado do que a descrição resumida
|
|
Análise de causa raiz
|
Informações sobre a causa dos sintomas vistos no ativo de IA agentivo. Identifica componentes específicos do problema e qual métrica o descobriu.
|
|
Vestígios com esta ocorrência
|
Logs de execução específicos em que o problema é visto. Você pode analise rastreamentos para entender como o problema se manifesta.
|
|
Observações da análise
|
Espaço para você adicionar detalhes sobre a análise e o que você deseja comunicar a outras pessoas sobre o problema. Essas anotações não são consideradas ao aplicar otimizações. Consulte Aplicar otimizações para obter mais informações.
|
- Opcional:
Analise os rastreamentos do problema .
-
Depois de revisar os problemas identificados, selecione Comece a otimização Para ver as correções recomendadas pelo LLM.
Resultado
Os problemas associados às métricas de diferentes componentes do ativo de IA agentivo são revisados, analisados e documentados.
O que Fazer Depois
Passe para a próxima etapa até aplicar otimizações para corrigir problemas identificados.