Créer un jeu de tests

Pour créer ou compléter un NLU jeu de tests, vous pouvez charger un fichier d’énoncés de test correspondant à des intentions correctes. Utilisez le jeu de tests pour évaluer les performances de votre modèle.

Avant de commencer

• Assurez-vous que les modules d’extension Console NLU - Core, Console NLU module d’extension - Advanced Features et Intelligence prédictive le module d’extension Console NLU sont tous installés et activés
• Vous pouvez utiliser des jeux de tests avec NLU des modèles pour Agent virtuel AI Search et AI Search.
• Rôle requis : nlu_editor, nlu_admin ou admin. L’éditeur doit être affecté au modèle.

Pourquoi et quand exécuter cette tâche

Votre fichier CSV ou XLSX (classeur Excel) doit contenir une table qui associe vos énoncés de test aux intentions que vous attendez d’eux. Votre fichier peut contenir jusqu’à 10 000 énoncés. Assurez-vous que le fichier comporte des colonnes intitulées « Énoncé » et « Intention prévue ».

Remarque :

Pour les jeux de tests dans d’autres langues que l’anglais, vous devez ajouter la propriété système glide.import.csv.charset avec la valeur UTF-8. Reportez-vous à la section Propriétés des jeux d’importation.

Pour obtenir les résultats des tests les plus précis, incluez les énoncés que le modèle est susceptible de rencontrer de la part de vos utilisateurs. Assurez-vous que vous avez des énoncés de test couvrant toutes les intentions dans votre modèle.

Essayez d’inclure environ 10 % des énoncés de test sans intention attendue. Inclure des énoncés sans intention attendue permet d’évaluer la capacité de votre modèle à détecter les énoncés non pertinents qui ne devraient pas avoir d’intention prévue.

Remarque :

Pour indiquer qu’un énoncé de test dans votre fichier n’a pas d’intention attendue, la valeur « Intention attendue » doit être vide.

Tableau 1. Exemple de table de jeu de tests

Énoncé	Intention attendue
Laissez-moi prendre un hamburger	Commande
Je veux payer	Paiement
Apporte-moi quelque chose de sucré	Commande
Le restaurant est-il ouvert ?
Un problème avec mon paiement	Commande, Paiement
Coût total	Paiement

Procédure

1. Accédez à la Tous > Console NLU > Fonctionnalités avancées NLU > Test de lot pour modèles multiples.
2. Cliquez sur Jeux de tests
3. Cliquez sur Créer un jeu de tests.

   

4. Choisissez un nom pour le jeu de tests.
5. Choisissez une langue.
6. Cliquez sur Sélectionner un fichier et choisissez un fichier CSV ou XLSX (Excel Workbook).
7. Cliquez sur Créer.
   Votre jeu de tests apparaît dans la liste.

Que faire ensuite

Utilisez le jeu de tests pour exécuter un test sur vos modèles. Pour en savoir plus, consultez Tester votre modèle ou Exécuter un test par lots multi-modèles.

Une fois que vous avez créé un jeu de tests, vous pouvez y ajouter d’autres énoncés. Lors de l’affichage d’un jeu de tests, cliquez sur Importer des énoncés.

Figure 1. Page du jeu de tests avec bouton Importer des énoncés

Sélectionnez un fichier CSV ou XLSX (classeur Excel) contenant vos énoncés supplémentaires à importer.

Figure 2. Fenêtre Importer des énoncés

Cliquez sur Importer. Le système ajoute vos énoncés au jeu de tests. Après l’importation, réexécutez tous les tests qui utilisent le jeu de tests.