Vá ao vivo e monitore
Implante seu agente na produção, ative a análise e o monitoramento e estabeleça a cadência de revisão contínua que mantém o desempenho seguro do agente ao longo do tempo.
A implantação na produção não é o fim do processo, é o início de um ciclo contínuo de monitoramento e melhoria. Configure seu monitoramento antes de entrar em operação para que você tenha uma linha de base de desempenho a partir do primeiro dia de operação de produção.
Implantar na produção
Antes de implantar, confirme se todos os critérios de portão de validação da Fase 5 foram atendidos e se todas as aprovações organizacionais necessárias (revisão de segurança, aprovação de governança de IA) foram obtidas.
Ao implantar, verifique se todas as funções, ACLs, configurações de identidade do usuário, configurações do Guardian e políticas de privacidade da compilação que não é de produção estão replicadas corretamente na instância de produção. O controle de acesso e a configuração do Guardian não são transferidos automaticamente em todos os cenários de implantação.
Ative a análise e o monitoramento
Configure os seguintes recursos de monitoramento no dia do lançamento:
- Análise do Now Assist
- Monitore o uso geral, o desempenho e a adoção do Now Assist E agentes de IA. Consulte Analyzing Now Assist performance.
- Painel de Análise do agente de IA
- Rastreie o uso do agente de IA, o ganho de eficiência, o tempo de resolução e as tendências de encerramento de tarefas específicas para seus agentes implantados. Consulte AI Agent Analytics dashboard.
- Guardião do Now Assist análise
- Monitore o desempenho da proteção para rastrear a frequência com que conteúdo ofensivo, tentativas de injeção imediata e detecções de assunto confidencial ocorrem na produção. Consulte Now Assist Guardian analytics.
Estabeleça sua linha de base
Registre suas métricas de produção iniciais em relação aos critérios de sucesso definidos na Fase 2. Suas medições de linha de base durante a primeira semana de operação de produção fornecem o ponto de referência para todas as decisões de otimização futuras.
No mínimo, registre o seguinte desde o primeiro dia:
- Volume de execução do agente (número de invocações).
- Taxa de desvio e fechamento da tarefa.
- Contagens de detecção de guardião por categoria (ofensivo, injeção de prompt, tópicos confidenciais).
- Quaisquer falhas de controle de acesso surgiram nos logs.
Monitoramento e revisão contínuos
Agende as seguintes atividades recorrentes para manter seu agente funcionando com segurança:
- Revisão regular do log do Guardian
- Exporte e revise Guardião do Now Assist registra em uma programação regular para identificar padrões emergentes no conteúdo detectado. Consulte . O aumento das taxas de detecção pode indicar que seu agente está sendo direcionado ou que seus prompts precisam de refinamento.
- Auditoria de controle de acesso
- Revise periodicamente quem detém as funções que podem invocar seus agentes e confirme se as configurações de mascaramento de função ainda refletem a intenção de privilégio mínimo à medida que as funções e a estrutura da equipe da sua organização evoluem.
- Revisão de desempenho
- Revise as métricas de desempenho do seu agente em relação à sua linha de base e aos critérios de sucesso. Use o painel Análise do agente de IA e a Análise do Now Assist para identificar tendências e determinar se o refinamento de prompt ou mudanças de configuração são necessárias.