Criar um conjunto de testes

Para criar ou adicionar a um conjunto de testes NLU, você pode carregar um arquivo de enunciados de teste correspondentes às intenções corretas. Use o conjunto de testes para avaliar o desempenho do seu modelo.

Antes de Iniciar

• Certifique-se de que o plug-in Workbench de NLU - Core, o plug-in Workbench de NLU, o plug-in Workbench de NLU - Recursos avançados e o plug-in Inteligência preditiva estejam todos instalados e ativados
• Você pode usar conjuntos de testes com modelos [ NLU para Virtual Agent e AI Search.
• Função necessária: nlu_editor, nlu_admin ou admin. O editor deve ser atribuído ao modelo.

Por Que e Quando Desempenhar Esta Tarefa

Seu arquivo CSV ou XLSX (Pasta de trabalho do Excel) deve conter uma tabela que emparelha seus enunciados de teste com as intenções que você espera deles. Seu arquivo pode conter até 10.000 enunciados. Verifique se o arquivo tem colunas intituladas "Enunciado" e "Intenção esperada".

Nota:

Para conjuntos de testes em idiomas diferentes do inglês, você deve adicionar a propriedade do sistema glide.import.csv.charset com o valor UTF-8. Consulte Propriedades dos conjuntos de importação.

Para obter resultados de testes mais precisos, inclua enunciados que o modelo provavelmente encontrará dos usuários. Certifique-se de ter enunciados de teste que cubram todas as intenções do seu modelo.

Procure incluir cerca de 10% dos enunciados de teste sem intenções esperadas. A inclusão de enunciados sem intenção esperada ajuda a avaliar a capacidade do seu modelo de detectar enunciados irrelevantes que não devem ter nenhuma intenção prevista.

Nota:

Para indicar que um enunciado de teste em seu arquivo não tem intenção esperada, o valor de "Intenção esperada" deve estar vazio.

Tabela 1. Exemplo de tabela de conjunto de testes

Enunciado	Intenção esperada
Deixe-me pedir um hambúrguer	Ordem
Quero pagar	Valor de pagamento
Traga-me algo legal	Ordem
O restaurante está aberto?
Algo errado com meu pagamento	Pedido, pagamento
Custo total	Valor de pagamento

Procedimento

1. Navegar até Todos > NLU Workbench > Recursos avançados de NLU > Teste em lote para vários modelos.
2. Clique em Conjuntos de testes
3. Clique em Criar conjunto de testes.

   

4. Escolha um nome para o conjunto de testes.
5. Escolha um idioma.
6. Clique em Selecionar arquivo e escolha um arquivo CSV ou XLSX (Pasta de trabalho do Excel).
7. Clique em Criar.
   Seu conjunto de testes aparece na lista.

O que Fazer Depois

Use o conjunto de testes para executar um teste em seus modelos. Para saber como, consulte Teste seu modelo ou Executar um teste em lote de vários modelos.

Depois de criar um conjunto de testes, você pode adicionar mais enunciados a ele. Ao exibir um conjunto de testes, clique em Importar enunciados.

Figura 1. Página de conjunto de testes com botão de importação de enunciados

Selecione um arquivo CSV ou XLSX (Pasta de trabalho do Excel) com seus enunciados adicionais para importar.

Figura 2. Janela de importação de enunciados

Clique em Importar. O sistema adiciona seus enunciados ao conjunto de testes. Após a importação, execute novamente todos os testes que usam o conjunto de testes.