Führen Sie einen Batch-Test mit mehreren Modellen aus

Testen Sie mehrere Natural Language Understanding(NLU) Modelle für einen Testsatz. Bewerten Sie die Qualität Ihrer Modelle, und verfeinern Sie sie, um die Absichtsvorhersage zu verbessern.

Vorbereitungen

• Stellen Sie sicher, dass NLU-Workbench– Core-Plugin, NLU-Workbench Plugin, NLU-Workbench– Plugin „Erweiterte Funktionen“ und Predictive Intelligence Plugins sind alle installiert und aktiviert.
• Haben Sie mindestens ein trainiertes Modell für Virtual Agent Oder KI-Suche.
• Haben Sie einen Testsatz, der Testäußerungen mit erwarteten Absichten enthält. Siehe Testsatz erstellen oder Erstellung und Verwaltung von Testsätzen.
• Erforderliche Rolle: nlu_admin oder admin. Wenn sie einem Modell zugewiesen ist, kann die Rolle „nlu_Editor“ Tests ausführen und Testäußerungen für dieses Modell ändern.

Warum und wann dieser Vorgang ausgeführt wird

In Batch-Tests für mehrere Modelle , Sie können einen Testsatz verwenden, der nicht der Standardtestsatz des Modells ist.

Außerdem können Sie mit bis zu zehn Modelle gleichzeitig testen Batch-Tests für mehrere Modelle . Tests mit weniger Modellen werden jedoch schneller ausgeführt.

Beim Testen mehrerer Modelle muss Ihr Testsatz mindestens 25 % der Gesamtabsichten aller Modelle abdecken. Verwenden Sie Testsätze, die Äußerungen enthalten, in denen die Modelle wahrscheinlich angezeigt werden Virtual Agent Oder KI-Suche.

Hinweis:

Wenn eine erwartete Absicht in Ihrem Testsatz mit keiner Absicht in Ihren Modellen übereinstimmt, werden diese erwartete Absicht und ihre Testäußerungen übersprungen. Sie werden nicht gezählt oder in Testergebnissen angezeigt.

Um ein einzelnes Modell anhand seines Standardtestsatzes zu testen, verwenden Sie Testen und veröffentlichen Sie Ihr Modell Phase auf der Übersichtsseite des Modells. Weitere Informationen finden Sie unter Ihr Modell testen und veröffentlichen.

Prozedur

1. Navigieren zu Alle > NLU-Workbench > NLU – erweiterte Funktionen > Batch-Tests für mehrfache Modellean.
2. Klicken Sie Auf Führen Sie einen Test aus .
3. In Führen Sie einen neuen Batch-Test aus Wählen Sie Ihre Modelle aus der Liste aus.
   
4. Wählen Sie einen Testsatz aus der Liste aus.
5. Klicken Sie auf Ausführen.
   
   Ihr neuer Test wird in angezeigt Testergebnisse Liste mit Wird Getestet... Status.

Nächste Maßnahme

Wenn der Batch-Test abgeschlossen ist, ändert sich sein Status in Fertig . Sie können auf den Namen des Testsatzes klicken, um die Testergebnisse anzuzeigen.

Verwenden Sie die Ergebnisse, um Ihre Modelle anzupassen und zu verbessern. Führen Sie dann den Test erneut aus, um die Leistung zu bewerten.

Batch-Tests können sich auf Empfehlungen zu Konfidenzschwellenwerten auswirken. Weitere Informationen finden Sie unter NLU-Modelleinstellungen.