Comparar as versões de rascunho e publicadas do seu modelo de NLU

Comparar um modelo treinado de rascunho Compreensão da linguagem natural (NLU) com a versão publicada mais recente. Teste e revise as mudanças para garantir que o modelo de rascunho tenha maior desempenho.

Antes de Iniciar

• Certifique-se de que o plug-in Workbench de NLU, o plug-in Workbench de NLU - Core, o plug-in Workbench de NLU - Recursos avançados e o plug-in Predictive Intelligence estejam instalados e ativados.
• Função necessária: nlu_editor, nlu_admin ou admin. O editor deve ser atribuído ao modelo.

Por Que e Quando Desempenhar Esta Tarefa

Neste cenário de exemplo, você está treinando e testando um modelo NLU publicado no Workbench de NLU iterativamente com o objetivo de melhorar suas pontuações de confiança de previsão.

Ao tentar um enunciado em um modelo NLU :

• Se o modelo for treinado e nunca publicado, o painel Modelo de teste mostrará somente os resultados do modelo treinado.
• Se o modelo for treinado e publicado, o painel Modelo de teste mostrará somente os resultados do modelo publicado.
• Se você fez mudanças em um modelo publicado e o treinou, o painel Modelo de Teste mostrará os resultados do modelo treinado e publicado para comparação.

Neste procedimento de exemplo, você clonou o modelo de um modelo de RH somente leitura pré-criado. Você clonou o modelo para criar sua própria versão específica de negócios dele, aproveitando as intenções existentes do modelo pré-criado.

Procedimento

1. Navegar até Todos > NLU Workbench > Modelos.
   A guia Virtual Agent é aberta por padrão.
2. Selecione a guia correspondente à aplicação do seu modelo e selecione o nome do modelo publicado.
3. Na página de visão geral do modelo, localize o cartão Criar e treinar seu modelo e clique na fase Exibir.
4. Faça uma mudança nas intenções, nos enunciados, nas entidades ou no vocabulário.
   Neste cenário de exemplo, você adiciona mais alguns enunciados de treinamento à intenção #UpdateEmail.
5. Treine e teste o modelo alterado para que você possa ver suas pontuações de previsão em comparação com as pontuações da versão publicada.
   1. Na guia Treinar modelo, clique no botão Treinar.
   2. Quando o treinamento for concluído, o sistema exibirá O modelo foi treinado com sucesso.
   3. Na guia Testar modelo, insira este enunciado: endereço de e-mail incorreto.
   4. Clique em Ir.

   O painel exibe resultados de previsões para o modelo publicado e o modelo treinado. Compare os resultados das duas versões do modelo, antes e depois das mudanças. Neste exemplo, a pontuação de confiança aumentou em uma pequena margem. Ao fazer mudanças significativas no conteúdo do modelo, a pontuação de confiança ou até mesmo as previsões de intenção podem mudar.

   

O que Fazer Depois

Use as informações no painel de teste para ver se as mudanças feitas melhorarão o desempenho do modelo. Quando estiver satisfeito com as mudanças, teste o modelo antes de publicá-lo. Em seguida, publique seu modelo para substituir a versão publicada atual.