Création et gestion de jeux de tests
Utilisez le jeu de tests par défaut de votre NLU modèle pour tester les performances et la précision du modèle. Gérez votre jeu de tests dans le temps en générant ou en mettant à jour son contenu dans le Console NLUfichier .
Accéder à votre jeu de tests par défaut
- Accédez à la . Sélectionnez l’onglet de l’application de votre modèle, puis le nom de votre modèle dans la liste. Sur la page de vue d’ensemble du modèle, recherchez la carte Créer et former votre modèle et sélectionnez son bouton Afficher la phase . Sélectionnez ensuite l’onglet Jeu de tests .
- Accédez à la . Sélectionnez l’onglet de l’application de votre modèle, puis le nom de votre modèle dans la liste. Sur la page de vue d’ensemble du modèle, sélectionnez la vignette Couverture du test .
- Accédez à la onglet. Recherchez le nom de votre modèle. Les jeux de tests par défaut sont étiquetés comme valeur par défaut.
Ajouter du contenu à votre jeu de tests par défaut
Ajoutez des énoncés et leurs intentions attendues pour créer et gérer votre jeu de tests au fil du temps. Vous pouvez ajouter du contenu au jeu de tests par défaut avec les méthodes suivantes :
- Ajoutez manuellement des énoncés de test et leurs intentions attendues. À partir de la page de vue d’ensemble du modèle, accédez à onglet. Saisissez votre entrée dans le champ Saisissez un énoncé de test ici , sélectionnez une intention appropriée, puis sélectionnez le bouton Ajouter .
Une source manuelle est affectée à ces énoncés de test.
- Importez des énoncés de test et leurs intentions attendues à partir d’un fichier CSV ou d’autres modèles. Pour importer du contenu dans un jeu de tests par défaut, à partir de la page de vue d’ensemble du modèle, accédez à onglet. Sélectionnez Importer les énoncés de test.
Les énoncés de test importés se voient affecter une source Manuel.
- La fonctionnalité Boucle de rétroaction d’experts vous permet d’ajouter des énoncés utilisateur réels des journaux de messagerie instantanée à l’ensemble de Agent virtuel tests.
Ces énoncés de test sont affectés à une source de commentaires d’experts. Pour plus d'informations, consultez NLU Boucle de rétroaction d’experts.
Couverture du test
Le score de couverture de test est le pourcentage d’intentions activées d’un modèle qui ont des énoncés de test dans le jeu de tests par défaut. Avant de tester votre modèle, assurez-vous que la couverture est d’au moins 60 %. Plus le score de couverture de test est élevé, plus les résultats des tests de performances sont précis.
Votre couverture de test doit être d’au moins 60 %, avec au moins 5 énoncés de test par intention, pour que le système fournisse un seuil de confiance optimal pendant le test par lots. Pour en savoir plus sur le seuil de confiance, reportez-vous à Paramètres du modèle NLU.
Essayez d’avoir environ 10 % des énoncés de test d’un modèle marqués comme « non pertinents », ce qui signifie qu’il n’y a pas d’intention associée. Cela permet d’évaluer la façon dont le modèle gère les énoncés non pertinents dont aucune intention ne devrait avoir été prévue. Pour plus d’informations sur les énoncés non pertinents, reportez-vous à la section Détection de non-pertinence dans NLU.
Utiliser le jeu de tests
Pour utiliser le jeu de tests par défaut de la phase Tester et publier votre modèle, reportez-vous à la section Tester et publier votre modèle.
Pour utiliser le jeu de tests dans l’option Test par lots pour modèles multiples, reportez-vous à la section Test de lot pour modèles multiples.
Caractéristiques des jeux de tests par défaut
Lorsqu’une instance est mise à niveau, des jeux de tests par défaut sont créés pour tous les modèles existants qui n’en disposent pas déjà.
Lorsque vous copiez un modèle à l’aide de l’option Dupliquer ce modèle, le jeu de tests par défaut de l’original est copié dans le nouveau modèle. Pour plus d'informations, consultez Dupliquer un modèle NLU.
Les énoncés de l’ensemble de tests ne doivent pas être identiques à ceux de l’ensemble de formations.
Les jeux de tests par défaut ne peuvent pas être supprimés séparément de leurs modèles.
Les énoncés du jeu de tests doivent être dans la même langue que leur modèle.
Des jeux de tests sont disponibles pour Agent virtuel les modèles OR Recherche IA .
Téléchargement ou déplacement de jeux de tests par défaut
Les jeux de tests par défaut peuvent être téléchargés ou déplacés comme suit.
- Les jeux de tests par défaut peuvent être téléchargés séparément au format CSV. Pour télécharger le jeu de tests, à partir de la page de vue d’ensemble du modèle, accédez à onglet. Sélectionnez Télécharger le jeu de tests.Remarque :Les jeux de tests qui sont téléchargés à partir du jeu de tests Télécharger contiennent des énoncés de test et leurs intentions attendues, mais pas les sources.
- Les ensembles de tests par défaut peuvent être déplacés avec des ensembles de mises à jour. Lorsque vous ajoutez un NLU modèle à un ensemble de mises à jour, son jeu de tests par défaut est ajouté, y compris les énoncés de test, les intentions attendues et les sources. Pour plus d'informations, consultez Ajouter un modèle NLU à un ensemble de mises à jour.
- Lors de l’utilisation de la fonction Exporter le modèle en tant que CSV dans la table Tous les modèles existants , le jeu de tests par défaut n’est pas inclus. Pour plus d'informations, consultez Exporter un modèle NLU.