Créer un jeu de tests

Pour créer ou compléter un NLU jeu de tests, vous pouvez charger un fichier d’énoncés de test correspondant à des intentions correctes. Utilisez le jeu de tests pour évaluer les performances de votre modèle.

Avant de commencer

• Assurez-vous que les modules d’extension Console NLUConsole NLU - Core, plug-in, Console NLU - Advanced Features et Intelligence prédictive plug-in sont tous installés et activés
• Vous pouvez utiliser des jeux de tests avec NLU des modèles pour Agent virtuel Recherche IA.
• Rôle requis : nlu_editor, nlu_admin ou admin. L’éditeur doit être affecté au modèle.

Pourquoi et quand exécuter cette tâche

Votre fichier CSV ou XLSX (classeur Excel) doit contenir une table qui associe vos énoncés de test aux intentions que vous attendez d’eux. Votre fichier peut contenir jusqu’à 10 000 énoncés. Assurez-vous que le fichier comporte des colonnes intitulées « Énoncé » et « Intention attendue ».

Remarque :

Pour les jeux de tests dans d’autres langues que l’anglais, vous devez ajouter la propriété système glide.import.csv.charset avec la valeur UTF-8. Reportez-vous à la section Propriétés des jeux d’importation.

Pour obtenir les résultats de test les plus précis, incluez les énoncés que le modèle est susceptible de rencontrer de la part de vos utilisateurs. Assurez-vous que vous disposez d’énoncés de test couvrant toutes les intentions de votre modèle.

Essayez d’inclure environ 10 % des énoncés de test sans intention attendue. L’inclusion d’énoncés sans intention attendue permet d’évaluer la capacité de votre modèle à détecter les énoncés non pertinents qui ne devraient avoir aucune intention prévue.

Remarque :

Pour indiquer qu’un énoncé de test dans votre fichier n’a aucune intention attendue, la valeur « Intention attendue » doit être vide.

Tableau 1. Exemple de table de jeu de tests

Énoncé	Intention attendue
Laisse-moi manger un hamburger	Ordre
Je veux payer	Paiement
Apporte-moi quelque chose de sucré	Ordre
Le restaurant est-il ouvert ?
Un problème avec mon paiement	Commande, Paiement
Coût total	Paiement

Procédure

1. Accédez à la Tout > Console NLU > Fonctionnalités avancées NLU > Test de lot pour modèles multiples.
2. Cliquer sur Jeux de tests
3. Cliquez sur Créer un jeu de tests.

   

4. Choisissez un nom pour le jeu de tests.
5. Choisissez une langue.
6. Cliquez sur Sélectionner un fichier et choisissez un fichier CSV ou XLSX (classeur Excel).
7. Cliquez sur Créer.
   Votre jeu de tests apparaît dans la liste.

Que faire ensuite

Utilisez le jeu de tests pour exécuter un test sur vos modèles. Pour en savoir plus, consultez Tester votre modèle ou Exécuter un test par lots multi-modèles.

Une fois que vous avez créé un jeu de tests, vous pouvez y ajouter d’autres énoncés. Lors de l’affichage d’un jeu de tests, cliquez sur Importer les énoncés.

Figure 1. Page de jeu de tests avec bouton d’importation d’énoncés

Sélectionnez un fichier CSV ou XLSX (classeur Excel) contenant vos énoncés supplémentaires à importer.

Figure 2. Fenêtre Importer des énoncés

Cliquez sur Importer. Le système ajoute vos énoncés au jeu de tests. Après l’importation, réexécutez tous les tests qui utilisent le jeu de tests.