Créer un jeu de tests

Pour créer ou compléter un NLU jeu de tests, vous pouvez charger un fichier d’énoncés de test correspondant à des intentions correctes. Utilisez le jeu de tests pour évaluer les performances de votre modèle.

Avant de commencer

• Assurez-vous que le module d’extension - Core, Console NLUConsole NLU le module d’extension - Fonctionnalités avancées et Intelligence prédictive le module d’extension Console NLU sont tous installés et activés
• Vous pouvez utiliser des jeux de tests avec NLU des modèles pour Agent virtuel Recherche IA.
• Rôle requis : nlu_editor, nlu_admin ou administrateur. L’éditeur doit être affecté au modèle.

Pourquoi et quand exécuter cette tâche

Votre fichier CSV ou XLSX (Excel Workbook) doit contenir une table qui associe vos énoncés de test aux intentions que vous attendez pour eux. Votre fichier peut contenir jusqu’à 10 000 énoncés. Assurez-vous que le fichier comporte des colonnes intitulées « Énoncé » et « Intention attendue ».

Remarque :

Pour les jeux de test dans des langues autres que l’anglais, vous devez ajouter la propriété système glide.import.csv.charset avec la valeur UTF-8. Voir Propriétés des jeux d’importation.

Pour obtenir les résultats de test les plus précis, incluez les énoncés que le modèle est susceptible de rencontrer de la part de vos utilisateurs. Assurez-vous d’avoir des énoncés de test couvrant toutes les intentions de votre modèle.

Essayez d’inclure environ 10 % des énoncés de test sans intention attendue. L’inclusion d’énoncés sans intention attendue permet d’évaluer la capacité de votre modèle à détecter les énoncés non pertinents qui ne devraient pas avoir d’intention prédite.

Remarque :

Pour indiquer qu’un énoncé de test dans votre fichier n’a pas d’intention attendue, la valeur de « Intention attendue » doit être vide.

Tableau 1. Exemple de table de jeu de tests

Énoncé	Intention attendue
Laissez-moi prendre un hamburger	Commande
Je souhaite payer	Paiement
Offrez-moi quelque chose de sucré	Commande
Le restaurant est-il ouvert ?
Un problème avec mon paiement s’est produit	Commande, paiement
Coût total	Paiement

Procédure

1. Accédez à la Tout > Console NLU > Fonctionnalités avancées NLU > Test de lot pour modèles multiples.
2. Cliquer sur Jeux de tests
3. Cliquez sur Créer un jeu de tests.

   

4. Choisissez un nom pour le jeu de tests.
5. Choisissez une langue.
6. Cliquez sur Sélectionner un fichier et choisissez un fichier CSV ou XLSX (Excel Workbook).
7. Cliquez sur Créer.
   Votre jeu de tests apparaît dans la liste.

Que faire ensuite

Utilisez le jeu de tests pour exécuter un test sur vos modèles. Pour savoir comment, reportez-vous à la section Tester votre modèle ou Exécuter un test de lot multimodèle.

Une fois que vous avez créé un jeu de tests, vous pouvez y ajouter d’autres énoncés. Lors de l’affichage d’un jeu de tests, cliquez sur Importer les énoncés.

Figure 1. Page de jeu de tests avec bouton d’énoncés d’importation

Sélectionnez un fichier CSV ou XLSX (Excel Workbook) avec vos énoncés supplémentaires à importer.

Figure 2. Fenêtre d’importation des énoncés

Cliquez sur Importer. Le système ajoute vos énoncés au jeu de tests. Après l’importation, réexécutez tous les tests qui utilisent le jeu de tests.