Revise e aceite recomendações geradas pelo sistema para melhorar a qualidade do agente com base nos problemas detectados. Aplique otimizações antes de acionar uma reavaliação para confirmar se as mudanças resolveram as falhas.
Antes de Iniciar
Você deve ter uma avaliação agential concluída com problemas identificados.
Função necessária: administrador
Por Que e Quando Desempenhar Esta Tarefa
Se os problemas forem identificados pelos juízes de LLM, eles poderão gerar sugestões de possíveis correções para resolver os problemas. Depois de revisar o problema, você pode selecionar Comece a otimização para verificar as recomendações antes de aplicá-las e iniciar uma reavaliação.
Se você já estiver no fluxo para identificar problemas, pule para a etapa 6.
Procedimento
-
Navegar até .
-
Selecione a avaliação automatizada da qual você deseja revisar os resultados.
A página de detalhes da avaliação é aberta, exibindo os resultados gerais e as métricas de desempenho.
-
Se algum problema for identificado, selecione Revise e otimize para exibir detalhes.
A configuração assistida de otimização é aberta para esse ativo de IA agentivo.
Cada problema está associado a uma ferramenta específica ou ativo de IA agentivo.
-
Selecione um problema para revisar.
-
Analise o problema , incluindo analisando rastreamentos de ocorrências .
-
Selecione ocorrências para otimizar e selecione Comece a otimização .
Você pode optar por otimizar para quantos problemas quiser. É possível gerar mudanças específicas em um ativo de IA agentivo que resolvam vários problemas de uma só vez.
-
Selecione Sim para gerar as sugestões de otimização.
-
Revise as otimizações sugeridas.
As otimizações ocorrem no nível de prompt para descrições e listas de etapas de ativos de IA agentivos ou da ferramenta.
Se uma otimização for para uma descrição ou lista de etapas, você pode alternar para ver as instruções atuais por si só ao lado da sugestão da versão otimizada. Você também pode alternar para mostrar as diferenças entre a versão atual e sugerida ou para ver apenas a versão otimizada por si só.
Se você quiser fazer edições nos textos sugeridos, você pode alternar Modo de edição para inserir seu próprio texto ou mudar o conteúdo do texto gerado.
Para abrir a ferramenta ou o ativo de IA agentivo em Estúdio de agentes de IA, selecione o link abrir
ícone. O ativo de IA agentivo associado é aberto em uma nova guia do navegador.
Você pode ver os problemas que a otimização está tentando resolver selecionando Problemas de contribuição . Você pode selecionar um problema para revisar todos os detalhes, incluindo a análise de causa raiz.
-
Selecione Continue a reavaliar se você quiser reavaliar sem aplicar a otimização ou Revise e aplique se você quiser fazer as mudanças sugeridas.
-
Revise os detalhes para reavaliação.
O resumo da otimização inclui a lista de problemas que estão tentando ser resolvidos pela otimização.
Você pode nomear sua avaliação e selecionar a versão do ativo de IA agentivo. Como esta é uma reavaliação, as métricas de avaliação e o conjunto de dados são iguais à execução original e não podem ser alterados.
-
Selecione Inicie a reavaliação para iniciar a nova execução de avaliação agentiva.
Você pode voltar para uma etapa anterior no fluxo de otimização de ocorrências selecionando Voltar para a configuração de avaliação .
Resultado
Uma nova execução de avaliação começa com todas as mudanças aplicadas ao ativo de IA agentivo.
O que Fazer Depois
Você pode rastreie e monitore sua avaliação agential enquanto a reavaliação estiver em andamento. Após a conclusão da avaliação, você poderá revisar e comparar os resultados com a avaliação original e fazer otimizações adicionais, se necessário.