Erstellung und Verwaltung von Testsätzen
Verwenden Sie den Standardtestsatz von NLU Modell zum Testen der Leistung und Genauigkeit des Modells. Verwalten Sie Ihren Testsatz im Laufe der Zeit, indem Sie seinen Inhalt in erstellen oder aktualisieren NLU-Workbench.
Greifen Sie auf Ihren Standardtestsatz zu
- Navigieren zu an. Wählen Sie die Registerkarte für die Anwendung Ihres Modells und dann den Namen Ihres Modells aus der Liste aus. Suchen Sie auf der Übersichtsseite des Modells nach Erstellen und trainieren Sie Ihr Modell Karte und wählen Sie sie aus Zeigen Sie die Phase an Schaltfläche. Wählen Sie dann aus Testsatz Registerkarte.
- Navigieren zu an. Wählen Sie die Registerkarte für die Anwendung Ihres Modells und dann den Namen Ihres Modells aus der Liste aus. Wählen Sie auf der Übersichtsseite des Modells die aus Testabdeckung Kachel.
- Navigieren zu Registerkarte Suchen Sie den Namen Ihres Modells. Standardtestsätze sind als gekennzeichnet Standard .
Fügen Sie Ihrem Standardtestsatz Inhalte hinzu
Fügen Sie Äußerungen und ihre erwarteten Absichten hinzu, um Ihren Testsatz im Laufe der Zeit zu erstellen und zu verwalten. Mit den folgenden Methoden können Sie dem Standardtestsatz Inhalte hinzufügen:
- Fügen Sie Testäußerungen und ihre erwarteten Absichten manuell hinzu. Navigieren Sie auf der Übersichtsseite des Modells zu Registerkarte Geben Sie Ihre Eingabe in ein Geben Sie hier eine Testäußerung ein Wählen Sie eine entsprechende Absicht aus, und wählen Sie dann aus Hinzufügen Schaltfläche.
Diesen Testäußerungen wird eine Quelle von zugewiesen Manuell .
- Importieren Sie Testäußerungen und ihre erwarteten Absichten aus einer CSV-Datei oder aus anderen Modellen. Um Inhalte in einen Standardtestsatz zu importieren, navigieren Sie auf der Übersichtsseite des Modells zu Registerkarte Wählen Sie Aus Importieren Sie Testäußerungen .
Importierten Testäußerungen wird eine Quelle von zugewiesen Manuell .
- Mit der Funktion „Experten-Feedbackschleife“ können Sie tatsächliche Anwenderäußerungen aus hinzufügen Virtual Agent Chatprotokolle im Testsatz.
Diesen Testäußerungen wird eine Quelle von zugewiesen Expertenfeedback . Weitere Informationen finden Sie unter NLU Experten-Feedback-Schleife.
Testabdeckung
Die Punktzahl für die Testabdeckung ist der Prozentsatz der aktivierten Absichten eines Modells, die Testäußerungen im Standardtestsatz enthalten. Stellen Sie vor dem Testen Ihres Modells sicher, dass eine Abdeckung von mindestens 60 % besteht. Je höher die Punktzahl der Testabdeckung, desto genauer sind die Leistungstestergebnisse.
Ihre Testabdeckung muss mindestens 60 % mit mindestens 5 Testäußerungen pro Absicht betragen, damit das System während Batch-Tests einen optimalen Konfidenzschwellenwert bietet. Weitere Informationen zum Konfidenzschwellenwert finden Sie unter NLU-Modelleinstellungen.
Versuchen Sie, etwa 10 Prozent der Testäußerungen eines Modells als „nicht relevant“ zu markieren, was bedeutet, dass keine Absicht zugeordnet ist. Dies hilft bei der Bewertung, wie das Modell irrelevante Äußerungen behandelt, deren Absicht nicht vorhergesagt werden sollte. Weitere Informationen zu irrelevanten Äußerungen finden Sie unter Erkennung von Irrelevanz in NLU.
Verwenden Sie den Testsatz
Dient zur Verwendung des Standardtestsatzes aus dem Testen und veröffentlichen Sie Ihr Modell Phase, siehe Ihr Modell testen und veröffentlichen.
Informationen zur Verwendung des Testsatzes in Batch-Tests mit mehreren Modellen finden Sie unter Batch-Tests für mehrfache Modelle.
Merkmale von Standardtestsätzen
Wenn eine Instanz aktualisiert wird, werden Standardtestsätze für alle vorhandenen Modelle erstellt, die sie noch nicht haben.
Wenn Sie ein Modell mit kopieren Duplizieren Sie dieses Modell , Der Standardtestsatz des Originals wird in das neue Modell kopiert. Weitere Informationen finden Sie unter Duplizieren Sie ein NLU-Modell.
Die Äußerungen im Testsatz dürfen nicht mit den Äußerungen im Trainingssatz identisch sein.
Standardtestsätze können nicht getrennt von ihren Modellen gelöscht werden.
Testsatzäußerungen müssen in derselben Sprache wie ihr Modell vorliegen.
Testsätze sind für verfügbar Virtual Agent Oder KI-Suche Modelle.
Standardtestsätze werden heruntergeladen oder verschoben
Standardtestsätze können wie folgt heruntergeladen oder verschoben werden.
- Standardtestsätze können separat im CSV-Format heruntergeladen werden. Um den Testsatz herunterzuladen, navigieren Sie auf der Übersichtsseite des Modells zu Registerkarte Wählen Sie Aus Testsatz herunterladen .Hinweis:Testsätze, die von heruntergeladen werden Testsatz herunterladen Enthalten Testäußerungen und ihre erwarteten Absichten, aber nicht die Quellen.
- Standardtestsätze können mit Update-Sätzen verschoben werden. Wenn Sie eine hinzufügen NLU Modell zu einem Update-Satz, dessen Standardtestsatz hinzugefügt wird, einschließlich Testäußerungen, erwarteten Absichten und Quellen. Weitere Informationen finden Sie unter Fügen Sie einem Update-Satz ein NLU-Modell hinzu.
- Bei Verwendung von Modell als CSV exportieren Funktion in Alle vorhandenen Modelle Tabelle, der Standardtestsatz ist nicht enthalten. Weitere Informationen finden Sie unter Exportieren Sie ein NLU-Modell.