Para criar ou adicionar a um NLU conjunto de testes, você pode carregar um arquivo de enunciados de teste correspondentes às intenções corretas. Use o conjunto de testes para avaliar o desempenho do seu modelo.
Antes de Iniciar
Certifique-se de que Workbench de NLU Plug-in Core, Workbench de NLU plug-in, Workbench de NLU- Plug-in de recursos avançados e Inteligência preditiva todos os plug-ins estão instalados e ativados
Você pode usar conjuntos de testes com NLU modelos para Virtual Agent E Pesquisa com IA.
Função necessária: nlu_editor, nlu_admin ou admin. O editor deve ser atribuído ao modelo.
Por Que e Quando Desempenhar Esta Tarefa
Seu arquivo CSV ou XLSX (Excel Workbook) deve conter uma tabela que emparelhe seus enunciados de teste com as intenções que você espera para eles. Seu arquivo pode conter até 10 000 enunciados. Certifique-se de que o arquivo tenha colunas intituladas "enunciado" e "Intenção esperada".
Nota:
Para conjuntos de testes em idiomas diferentes do inglês, você deve adicionar a propriedade do sistema glide.import.csv.charset com o valor UTF-8. Consulte Propriedades dos conjuntos de importação .
Para obter resultados de teste mais precisos, inclua enunciados que o modelo provavelmente encontrará de seus usuários. Certifique-se de ter enunciados de teste cobrindo todas as intenções em seu modelo.
Incluir cerca de 10% dos enunciados de teste sem intenções esperadas. Incluir enunciados sem intenção esperada ajuda a avaliar a capacidade do seu modelo de detectar enunciados irrelevantes que não devem ter intenção prevista.
Nota:
Para indicar que um enunciado de teste em seu arquivo não tem intenção esperada, o valor de "Intenção esperada" deve estar vazio.
Tabela 1. Tabela de conjunto de testes de exemplo
Enunciado
Intenção esperada
Deixe-me comer um hambúrguer
Ordem
Quero pagar
Valor de pagamento
Me dê algo doce
Ordem
O restaurante está aberto
Algo errado com meu pagamento
Pedido, pagamento
Custo total
Valor de pagamento
Procedimento
Navegar até Tudo > Workbench de NLU > Recursos avançados de NLU > Teste em lote para vários modelos.
Clique em Conjuntos de testes
Clique em Criar conjunto de testes .
Escolha um nome para o conjunto de testes.
Escolha um idioma.
Clique em Selecione o arquivo E escolha um arquivo CSV ou XLSX (Excel Workbook).
Depois de criar um conjunto de testes, você pode adicionar mais enunciados a ele. Ao exibir um conjunto de testes, clique em Importar enunciados .Figura 1. Página do conjunto de testes com botão de importação de enunciados
Selecione um arquivo CSV ou XLSX (Excel Workbook) com seus enunciados adicionais para importar. Figura 2. Janela Importar enunciados
Clique em Importar. O sistema adiciona seus enunciados ao conjunto de testes. Após a importação, execute novamente todos os testes que usam o conjunto de testes.