Executar um teste em lote de vários modelos

Teste vários modelos Compreensão da linguagem natural (NLU) em relação a um conjunto de testes. Avalie a qualidade dos seus modelos e os refine para melhorar a previsão de intenção.

Antes de Iniciar

• Certifique-se de que os plug-ins Workbench de NLU - Core, Workbench de NLU, Workbench de NLU - Recursos avançados e Inteligência preditiva estejam todos instalados e ativados.
• Tenha um ou mais modelos treinados para Virtual Agent ou Pesquisa com IA.
• Tenha um conjunto de testes contendo enunciados de teste com intenções esperadas. Consulte Criar um conjunto de testes ou Criação e gestão de conjunto de testes.
• Função necessária: nlu_admin ou admin. Quando atribuída a um modelo, a função nlu_editor pode executar testes e modificar enunciados de teste para esse modelo.

Por Que e Quando Desempenhar Esta Tarefa

No Teste em lote de vários modelos, você pode usar um conjunto de testes que não seja o conjunto de testes padrão do modelo.

Além disso, você pode testar até dez modelos de uma vez usando o Teste em lote de vários modelos. No entanto, os testes com menos modelos são executados mais rapidamente.

Ao testar vários modelos, o conjunto de testes deve abranger pelo menos 25% do total de intenções de todos os modelos. Use conjuntos de testes que contenham enunciados que os modelos provavelmente encontrarão em Virtual Agent ou Pesquisa com IA.

Nota:

Se uma intenção esperada em seu conjunto de testes não corresponder a nenhuma intenção em seus modelos, essa intenção esperada e seus enunciados de teste serão ignorados. Eles não são contados ou exibidos nos resultados de testes.

Para testar um único modelo em relação ao conjunto de testes padrão, use a fase Testar e publicar seu modelo na página de visão geral do modelo. Para obter mais informações, consulte Teste e publique seu modelo.

Procedimento

1. Navegar até Todos > Workbench de NLU > Recursos avançados de NLU > Teste em lote para vários modelos.
2. Clique em Executar um teste.
3. Na janela Executar novo teste em lote, selecione seus modelos na lista.
   
4. Selecione um conjunto de testes na lista.
5. Clique em Executar.
   
   Seu novo teste é exibido na lista Resultados de testes com um texto Testando... Status.

O que Fazer Depois

Quando o teste em lote é concluído, seu Status muda para Concluído. Você pode clicar no nome do conjunto de testes para exibir os resultados de testes.

Use os resultados para ajustar e melhorar seus modelos. Em seguida, execute o teste novamente para avaliar o desempenho.

O teste em lote pode afetar as recomendações de limite de confiança. Para obter mais informações, consulte Configurações do modelo de NLU.