Création et gestion de jeux de tests
Utilisez le jeu de tests par défaut de votre NLU modèle pour tester les performances et la précision du modèle. Gérez votre jeu de tests au fil du temps en créant ou en mettant à jour son contenu dans le Console NLU.
Accéder à votre jeu de tests par défaut
- Accédez à la . Sélectionnez l’onglet de l’application de votre modèle, puis le nom de votre modèle dans la liste. Sur la page de vue d’ensemble du modèle, recherchez la carte Créer et former votre modèle , puis sélectionnez son bouton Afficher la phase . Sélectionnez ensuite l’onglet Jeu de tests .
- Accédez à la . Sélectionnez l’onglet de l’application de votre modèle, puis le nom de votre modèle dans la liste. Sur la page de vue d’ensemble du modèle, sélectionnez la vignette Couverture de test .
- Accédez à la onglet. Trouvez le nom de votre modèle. Les jeux de tests par défaut sont étiquetés par défaut.
Ajouter du contenu à votre jeu de tests par défaut
Ajoutez des énoncés et leurs intentions attendues pour créer et gérer votre jeu de tests au fil du temps. Vous pouvez ajouter du contenu au jeu de tests par défaut à l’aide des méthodes suivantes :
- Ajoutez manuellement des énoncés de test et leurs intentions attendues. À partir de la page de vue d’ensemble du modèle, accédez à onglet. Tapez votre entrée dans le champ Saisissez un énoncé de test ici , sélectionnez une intention appropriée, puis sélectionnez le bouton Ajouter .
Ces énoncés de test sont affectés à une source de Manuel.
- Importez des énoncés de test et leurs intentions attendues à partir d’un fichier CSV ou d’autres modèles. Pour importer du contenu dans un jeu de tests par défaut, à partir de la page de vue d’ensemble du modèle, accédez à onglet. Sélectionnez Importer les énoncés de test.
Les énoncés de test importés se voient affecter une source de valeur Manuel.
- La fonctionnalité Boucle de rétroaction d’experts vous permet d’ajouter des énoncés d’utilisateurs réels à partir des journaux de messagerie instantanée au jeu de Agent virtuel tests.
Ces énoncés de test sont affectés à une source de commentaires d’experts. Pour plus d'informations, consultez NLU Boucle de rétroaction d’experts.
Couverture du test
Le score de couverture de test est le pourcentage des intentions activées d’un modèle qui ont des énoncés de test dans le jeu de tests par défaut. Avant de tester votre modèle, assurez-vous qu’il y a une couverture d’au moins 60 %. Plus le score de couverture de test est élevé, plus les résultats des tests de performances sont précis.
Votre couverture de test doit être d’au moins 60 %, avec au moins 5 énoncés de test par intention, afin que le système fournisse un seuil de confiance optimal pendant le test par lots. Pour plus d’informations sur le seuil de confiance, reportez-vous à la section Paramètres du modèle NLU.
Essayez qu’environ 10 % des énoncés de test d’un modèle soient marqués comme « non pertinents », ce qui signifie qu’aucune intention n’est associée. Cela permet d’évaluer la façon dont le modèle gère les énoncés non pertinents qui ne devraient pas avoir d’intention prédite. Pour plus d’informations sur les énoncés non pertinents, reportez-vous à la section Détection de non-pertinence dans NLU.
Utiliser le jeu de tests
Pour utiliser le jeu de tests par défaut de la phase Test et publier votre modèle , reportez-vous à la section Tester et publier votre modèle.
Pour utiliser le jeu de tests dans le test par lots pour modèles multiples, reportez-vous à la section Test de lot pour modèles multiples.
Caractéristiques des jeux de tests par défaut
Lorsqu’une instance est mise à niveau, des jeux de tests par défaut sont créés pour tous les modèles existants qui n’en disposent pas déjà.
Lorsque vous copiez un modèle à l’aide de l’option Dupliquer ce modèle, le jeu de tests par défaut de l’original est copié dans le nouveau modèle. Pour plus d'informations, consultez Dupliquer un modèle NLU.
Les énoncés du jeu de tests ne doivent pas être les mêmes que ceux du jeu d’entraînement.
Les jeux de tests par défaut ne peuvent pas être supprimés séparément de leurs modèles.
Les énoncés de jeux de tests doivent être dans la même langue que leur modèle.
Des jeux de tests sont disponibles pour Agent virtuel nos Recherche IA modèles.
Téléchargement ou déplacement de jeux de tests par défaut
Les jeux de tests par défaut peuvent être téléchargés ou déplacés comme suit.
- Les jeux de tests par défaut peuvent être téléchargés séparément au format CSV. Pour télécharger le jeu de tests, à partir de la page de vue d’ensemble du modèle, accédez à onglet. Sélectionnez Télécharger le jeu de tests.Remarque :Les jeux de tests téléchargés à partir de Télécharger le jeu de tests contiennent des énoncés de test et leurs intentions attendues, mais pas les sources.
- Les jeux de tests par défaut peuvent être déplacés avec des ensembles de mises à jour. Lorsque vous ajoutez un NLU modèle à un ensemble de mises à jour, son jeu de tests par défaut est ajouté, y compris les énoncés de test, les intentions attendues et les sources. Pour plus d'informations, consultez Ajouter un modèle NLU à un ensemble de mises à jour.
- Lors de l’utilisation de la fonction Exporter le modèle au format CSV dans la table Tous les modèles existants , le jeu de tests par défaut n’est pas inclus. Pour plus d'informations, consultez Exporter un modèle NLU.