Erkennung von Irrelevanz in NLU
Beibehalten Virtual Agent Chats mit Fokus auf Irrelevanz-Erkennung. Verwenden Sie die Erkennungsfunktion für Irrelevanz, um Ihren zu trainieren NLU Modell, um Vorhersagen für Äußerungen zu vermeiden, die nicht relevant sind.
Zusammenfassungsinformationen
Die Erkennungsfunktion für Irrelevanz verbessert die Genauigkeit der Vorhersage von NLU Modelle, indem sie trainiert werden, bestimmte Äußerungen zu ignorieren. Diese Äußerungen Ihrer Anwender gelten möglicherweise nicht für eine Absicht, daher sollten Sie keine Vorhersage erhalten.
Um sicherzustellen, dass Modelle keine Absicht vorhersagen, wenn sie nicht sollen, können Sie Äußerungen als markieren Nicht relevant . Diese markierten Äußerungen sind im Rahmen des Modelltrainings enthalten. Wenn das veröffentlichte Modell auf ähnliche Äußerungen Ihrer Anwender stößt, wird keine Absicht erfüllt oder vorhergesagt.
In der Tabelle zur Erkennung von Irrelevanz können Sie als markierte Äußerungen verwalten Nicht relevant .
Rollen, Nutzung und Navigation
Verwenden Sie nlu_admin Oder Administrator Rolle für den Zugriff auf die Irrelevanz-Erkennung. Die nlu_Editor Die Rolle kann auch auf die Irrelevanzerkennung zugreifen, muss jedoch einem Modell zugewiesen werden, um den Inhalt dieses Modells zu bearbeiten.
Die Erkennung von Irrelevanz ist für verfügbar Virtual Agent Nur Modelle.
- Navigieren zu an. Die Virtual Agent Die Registerkarte wird standardmäßig geöffnet.
- Scrollen Sie in der Liste von nach unten Virtual Agent-Modelle für Steigern Sie die Leistung Ihres Modells Abschnitt.
- Scrollen Sie horizontal, um die Karte zu finden Chats fokussiert halten , Und wählen Sie die entsprechende Schaltfläche aus Wechseln Sie zur Erkennung von Irrelevanz .
Hinzufügen von Äußerungen zur Erkennung von Irrelevanz
Es gibt mehrere Methoden zum Hinzufügen von Äußerungen zu Erkennung von Irrelevanz :
- Die Virtual Agent Chatprotokoll: In der Experten-Feedbackschleife in NLU-Workbench, Wenn Sie eine Äußerung überprüfen, die von erfasst wurde Virtual Agent Chat-Protokoll, können Sie es markieren Nicht relevant . Das System fragt, ob es für ein bestimmtes Modell oder für alle Modelle irrelevant sein soll. Nach dem Hinzufügen werden diese Äußerungen möglicherweise als angezeigt NO_INTENT In Experten-Feedbackschleife.
Weitere Informationen zur Experten-Feedbackschleife in finden Sie NLU, Siehe NLU Experten-Feedback-Schleife.
Diese Äußerungen haben eine Quelle von VA-Chatprotokolle In der Erkennungstabelle für Irrelevanz.
Manuelle Eingabe: Geben Sie bei der Erkennung von Irrelevanz Ihre Äußerung in ein Geben Sie hier Äußerungen ein Feld, und wählen Sie dann aus Hinzufügen . Das System fragt, ob es für ein bestimmtes Modell oder für alle Modelle irrelevant sein soll.
Diese Äußerungen haben eine Quelle von Manuell In der Erkennungstabelle für Irrelevanz.
- Importieren: Wenn Sie eine CSV- oder XLSX-Datei (Excel-Arbeitsmappe) zum Importieren von Trainingsäußerungen und deren Absichten verwenden, können Sie irrelevante Äußerungen angeben, indem Sie die Spalte Absicht leer lassen. Diese Äußerungen können als angezeigt werden NO_INTENT In Bereichen wie Experten-Feedbackschleife und Konfliktüberprüfung.
Weitere Informationen zum Importieren von Äußerungen und Absichten finden Sie unter Erstellen Sie einen NLU Modell aus einer CSV-Datei.
Diese Äußerungen haben eine Quelle von Manuell In der Erkennungstabelle für Irrelevanz.
Verhalten irrelevanter Äußerungen
Es gibt zwei Arten von irrelevanten Äußerungen: Solche, die einem bestimmten Modell zugeordnet sind, oder solche, die für ein Modell irrelevant sind. Einem Modell können maximal 200 irrelevante Äußerungen zugeordnet sein.
Im Folgenden finden Sie Details dazu, wie diese beiden Typen und die maximale Anzahl von 200 interagieren.
Wenn ein Modell zum Training übermittelt wird, werden höchstens 200 irrelevante Äußerungen damit übermittelt. Zuerst werden irrelevante Äußerungen übermittelt, die direkt diesem Modell zugeordnet sind. Dann werden Äußerungen übermittelt, die als für kein Modell relevant festgelegt sind. Die Summe dieser Typen überschreitet 200 nicht.
Wenn einem Modell 200 irrelevante Äußerungen zugeordnet sind und eine neue irrelevante Äußerung hinzugefügt wird, wird die älteste Äußerung des Modells verworfen. Die neue irrelevante Äußerung kann von beiden Typen sein (nicht relevant für das spezifische Modell oder nicht relevant für ein Modell).
Ein Modell darf nicht mehr irrelevante Äußerungen als normale Trainingsäußerungen haben.
Konfliktprüfung
Wenn eine Äußerung als irrelevant markiert ist und eine ähnliche Äußerung in einer Absicht vorhanden ist, macht das Modell keine Vorhersage für diese Äußerung. Mit anderen Worten: Irrelevante Äußerungen haben Vorrang vor Trainingsäußerungen.
Da irrelevante Äußerungen sich auf die Vorhersagen des Modells auswirken, werden sie als Konflikte angezeigt, wenn sie sich mit Trainingsäußerungen überschneiden.- Das Modul „modellübergreifende Konfliktüberprüfung“. Weitere Informationen zu diesem Modul finden Sie unter Konfliktanalyse für mehrfache Modelle.Hinweis:Das Modul „modellübergreifende Konfliktüberprüfung“ ist mit verfügbar NLU-Workbench– Anwendung „Erweiterte Funktionen“ von ServiceNow® Store. Weitere Informationen finden Sie unter NLU-Workbench: Erweiterte Funktionen.
- Die Registerkarte Konflikte einer Absicht. Weitere Informationen zu Konflikten in einer Absicht finden Sie unter Lösen Sie Absichtsprobleme.
Beachten Sie, dass irrelevante Äußerungen auf der Konfliktseite nicht bearbeitet oder gelöscht werden können. Kopieren Sie die irrelevante Äußerung von der Konfliktseite auf die Erkennungsseite für Irrelevanz, um die Äußerung zu ändern oder zu löschen.
Weitere Informationen
- Versuchen Sie in Testsätzen, etwa 10 % der Testäußerungen als irrelevant einzubeziehen. Dies hilft bei der Bewertung, wie Ihr Modell Äußerungen behandelt, für die keine Absicht vorhergesagt werden sollte. Wenn Sie Trainings- oder Testäußerungen aus einer CSV- oder XLSX-Datei (Excel Workbook) importieren, können Sie angeben, dass eine Äußerung irrelevant ist, indem Sie die Spalte Absicht leer lassen.
- Beim Testen von Modellen mit Testsätzen werden Ergebnisse berücksichtigt Richtig Wenn für eine irrelevante Äußerung keine Absicht vorhergesagt wird.
- Äußerungen, die als markiert wurden Nicht relevant Kann später neu zugewiesen werden. Wenn beispielsweise eine neue Absicht erstellt wird, können vorhandene irrelevante Äußerungen der neuen Absicht manuell zugewiesen werden. Sie werden dann Teil der normalen Trainingsäußerungen.
Um eine Äußerung in der Erkennung von Irrelevanz neu zuzuweisen, erweitern Sie die Liste im Absicht korrigiert Spalte und wählen Sie die entsprechende Absicht aus. Stellen Sie sicher, dass Sie auswählen Feedback speichern Schaltfläche nach der Neuzuweisung. Achten Sie auch darauf, das Modell erneut zu trainieren, um diese Updates in das Modell zu integrieren.
- Irrelevante Äußerungen sind nicht bestimmten Absichten innerhalb eines Modells zugeordnet. Sie sind entweder einem Modell zugeordnet oder als für kein Modell relevant markiert.
- Die Äußerungen, die als für kein Modell relevant markiert sind, werden als Teil der Trainingsdaten für jedes Modell übermittelt. Mit anderen Worten: Diese gelten für alle Modelle.
- Für die Integration ist ein Modelltraining erforderlich Nicht relevant Äußerungen. Das Training eines beliebigen Modells fügt allen Modellen neu markierte Äußerungen hinzu.
- Äußerungen können in der Erkennungstabelle für Irrelevanz gelöscht oder bearbeitet werden.
- Irrelevante Äußerungen müssen Inhalte haben, die sich von Äußerungen unterscheiden, die einer Absicht zugeordnet sind.