KI-Desktop-Aktionen Glossar

Erfahren Sie mehr über die Begriffe und Konzepte, die einzigartig für sind KI-Desktop-Aktionen.

A

Glossarbegriffe sind alphabetisch gruppiert.

Aktionsaufzeichnungsgerät

Aufzeichnungsfunktion im Design-Arbeitsbereich, die Anwenderinteraktionen mit Desktop-Anwendungen automatisch erfasst, um automatisierte Workflows zu erstellen. Der Recorder erfasst Klicks, Tastenanschläge, Dateneingaben sowie visuelle und kontextbezogene Informationen als Bildschirme und Schritte.

Desktop-Aktion für adaptiven Pfad

Eine Art von Desktop-Aktion, in der der KI-Agent dynamisch die Schritte bestimmt, die zum Abschließen einer Aufgabe erforderlich sind, basierend auf einem allgemeinen Ziel, das Sie in der Toolkonfiguration angeben. Im Gegensatz zu definierten Pfad-Desktop-Aktionen folgen Desktop-Aktionen für adaptive Pfade keiner festen Schrittfolge. Stattdessen überprüft der KI-Agent den aktuellen Status der Webseite und passt ihren Ansatz zur Laufzeit an. Da Schritte dynamisch bestimmt werden, können die Ergebnisse zwischen Ausführungen derselben Aufgabe variieren.

Beispiel: Überprüfen eines offenen Incidents und Weiterleitung basierend auf seiner aktuellen Prioritätsstufe, wobei die nächsten Schritte vom Wert abhängen, den der KI-Agent auf der Seite findet.

KI-Agent

Satz von Anweisungen und Tools für große Sprachmodelle (LLM) in KI-Agenten-Studio, die Eingaben in natürlicher Sprache verarbeiten, Ausführungspläne generieren und Desktop-Aktionen autonom oder halbautonom ausführen können.

KI-Agenten-Studio

ServiceNow Plattformschnittstelle zum Erstellen, Verwalten, Testen und Aktivieren von KI-Agenten. Desktop-Aktionen werden in veröffentlicht KI-Agenten-Studio Als Tools, die KI-Agenten während der Ausführung verwenden können.

Anker

Referenzpunkt auf einem erfassten Bildschirm, der der Automatisierung hilft, nahe gelegene UI-Elemente zu identifizieren und mit ihnen zu interagieren. Während der Ausführung verwendet das System Computervision, um den Anker zu finden, und identifiziert dann UI-Elemente in relativer Entfernung davon. Anker verbessern die Stabilität und Genauigkeit von Schritten, wenn sich der Standort des Zielelements verschieben kann oder wenn das UI-Layout zwischen Sitzungen variiert.

Automatische Erfassung

Methode zum Erstellen von Desktop-Aktionen durch Aufzeichnung von Anwenderinteraktionen mit Desktop-Anwendungen mithilfe des Aktionsrekorders. Der Recorder erfasst Klicks, Tastenanschläge und Dateneingaben zusammen mit visuellen und kontextbezogenen Informationen.

B

Glossarbegriffe sind alphabetisch gruppiert.

Hintergrundaufgabe

Typ der Desktop-Aktion, die vorgefertigte Connectors verwendet, um mit Anwendungen und Systemkomponenten im Hintergrund ohne UI-Interaktion zu interagieren. Unterstützte Anwendungen Microsoft Excel, Microsoft Outlook, Microsoft Word, PDF, POWERSHELL, SQL, SSH, und Systemaktionen. Desktop-Aktionen für Hintergrundaufgaben können nicht von Anwendern erstellt werden.

C

Glossarbegriffe sind alphabetisch gruppiert.

Konfidenzschwellenwert

Genauigkeitsstufe, die für den Abgleich eines erfassten Bilds erforderlich ist, bevor das System einen Schritt ausführt. Ein Wert von 1 definiert eine 100 %-Übereinstimmung, während 0,5 eine 50 %-Übereinstimmung definiert. Der Standardwert ist 0,95 (95 %-Übereinstimmung).

D

Glossarbegriffe sind alphabetisch gruppiert.

Definierte Pfad-Desktop-Aktion

Wiederverwendbare Automatisierung, die definiert, wie KI-Agenten mit Desktop- und Webanwendungen interagieren. Desktop-Aktionen bestehen aus Bildschirmen, Ankern und Schritten. Es gibt zwei Typen: Bildschirmaufgabe und Hintergrundaufgabe. Für diese Desktop-Aktion entwerfen Sie eine feste Reihenfolge von Schritten in KI-Desktop-Aktionen Windows Anwendung. Der KI-Agent führt diese Schritte in der von Ihnen angegebenen Reihenfolge ohne Abweichung aus. Definierte Pfad-Desktop-Aktionen unterstützen sowohl Desktop-Anwendungen als auch webbasierte Anwendungen und erfordern keine Google Chrome oder eine Browsererweiterung.

Verwenden Sie definierte Pfad-Desktop-Aktionen für Aufgaben, die immer derselben Sequenz folgen und vorhersagbare UI-Interaktionen beinhalten. Kontrast zu Desktop-Aktionen des adaptiven Pfads.

Beispiel: Automatische Eingabe von Versanddaten in eine Versandverwaltungsanwendung mithilfe einer festen Formularstruktur, die sich zwischen Ausführungen nicht ändert.

Arbeitsbereich entwerfen

Interaktive Umgebung ohne Code in Agenten-Desktop zum Erstellen, Konfigurieren, Verwalten und Testen von Desktop-Aktionen. Der Arbeitsbereich bietet eine visuelle Canvas, in der Sie Automatisierungs-Workflows mit mehreren Bildschirmen entwerfen können, die Geschäftsprozesse in verschiedenen Anwendungen erfassen. Zugänglich für Anwender mit der Rolle „KI-Agenten-Administrator“ (sn_aia.admin).

Desktop-Aktionsanwendung

Datensatz, der die Zuordnung zwischen einer Desktop-Aktion und der Desktop-Anwendung speichert, mit der sie interagiert. Wird in der Tabelle „Desktop-Aktionsanwendung“ [sn_desktop_core_action_application] gespeichert.

Desktop-in-Desktop-Modus (DID)

Virtuelle Umgebung im Ausführungsarbeitsbereich, in der Automatisierungen isoliert von der Desktop-Hauptsitzung ausgeführt werden. Sie können die Ausführung von Desktop-Aktionen und ihre Interaktion mit Desktop-Anwendungen überwachen, während Sie gleichzeitig an anderen Aufgaben arbeiten.

Desktop-Sitzung

Isoliert Windows Sitzung im Ausführungsarbeitsbereich, in der Desktop-Aktionen ausgeführt werden. Die Desktop-Sitzung wird automatisch gestartet, wenn Sie eine Desktop-Aktion testen oder eine Automatisierung über auslösen Now Assist Bereich.

E

Glossarbegriffe sind alphabetisch gruppiert.

Ausführungsstatus

Aktueller Status einer Automatisierung im Ausführungsarbeitsbereich. Status: Bereit, initiiert, wird ausgeführt, Erfolg, Fehlgeschlagen, und abgebrochen.

Ausführungsarbeitsbereich

Isolierte Desktop-Sitzung, in der Desktop-Aktionen während des Tests oder der Ausführung von KI-Agenten ausgeführt werden. Dieser Arbeitsbereich wird automatisch gestartet, wenn Sie eine Desktop-Aktion im Arbeitsbereich „Design“ testen oder eine Automatisierung über auslösen Now Assist Bereich. Sie öffnen den Ausführungsarbeitsbereich nicht direkt.

M

Glossarbegriffe sind alphabetisch gruppiert.

Manuelle Erfassung

Methode zum Erstellen von Desktop-Aktionen, indem Bildschirmaufnahmen durchgeführt, Anker eingefügt und Schritte einzeln definiert werden, anstatt Interaktionen automatisch aufzuzeichnen.

N

Glossarbegriffe sind alphabetisch gruppiert.

Now Assist-Bereich

ServiceNow Schnittstelle, über die Anwender KI-Agenten-Automatisierungen auslösen. Wenn Sie Anweisungen über bereitstellen Now Assist Bereich, wählt der KI-Agent die entsprechenden Desktop-Aktionen im Ausführungsarbeitsbereich aus und führt sie aus. Zugänglich für Anwender mit Now Assist Bereichsanwenderrolle (now_assist_panel_user).

O

Glossarbegriffe sind alphabetisch gruppiert.

Bildschirmaufgabe

Typ der Desktop-Aktion, die menschliche Interaktionen mit UI-Elementen in Thick-Client-Anwendungen, Legacy-Systemen oder SaaS-Anwendungen ohne APIs simuliert. Interaktionen umfassen das Klicken auf Schaltflächen, die Eingabe von Text und die Auswahl aus Menüs. Desktop-Aktionen auf dem Bildschirm werden im Design-Arbeitsbereich erstellt und verwaltet.

P

Glossarbegriffe sind alphabetisch gruppiert.

Parameterdatensatz

Datensatz, der von einem KI-Agenten-Administrator erstellt wurde und einen Referenznamen für Anmeldeinformationen wie Anwendernamen oder Passwörter speichert. KI-Agenten greifen während der Ausführung der Desktop-Aktion auf diese Datensätze zu, um vertrauliche Werte sicher abzurufen. Derzeit nur für Desktop-Aktionen für SSH-Connector und Hintergrundaufgaben unterstützt.

Parameterwertdatensatz

Untergeordneter Datensatz unter einem Parameterdatensatz, der den tatsächlichen Anmeldeinformationswert, z. B. einen Anwendernamen oder ein Passwort, für einen bestimmten Anwender speichert. Pro Anwender kann nur ein Parameterwertdatensatz für jeden Parameterdatensatz erstellt werden.

S

Glossarbegriffe sind alphabetisch gruppiert.

Bildschirm

Erfasstes Bild eines Anwendungsfensters in einer Desktop-Aktion. Bildschirme stellen die anwendungsstatus dar, die die Automatisierung während der Ausführung durchläuft. Jeder Bildschirm enthält mindestens einen Anker und zugehörige Schritte.

Intelligente Größenanpassung

Anzeigefunktion im Ausführungsarbeitsbereich, die die Desktop-Sitzung automatisch an die Anzeige anpasst. Enthält zwei Optionen:

• An Fenster anpassen : Skaliert die Sitzung so, dass sie in den Ausführungsarbeitsbereich passt.
• Ursprüngliche Lösung : Zeigt die Sitzung in ihrer nativen Auflösung mit Bildlaufleisten bei Bedarf an.

Schritt

Einzelne Interaktion innerhalb einer Desktop-Aktion, z. B. Klicken auf eine Schaltfläche, Eingabe von Text oder Extrahieren von Daten. Schritte werden relativ zu einem Anker positioniert.

• Eingabeschritttypen sind „Text festlegen“, „Klicken“, „Mausklick“ und „Schlüssel senden“.
• Ausgabeschritttypen umfassen „Text abrufen“, „Tabelle abrufen“ und „OCR-Lesetext“.

Schritt ein/Schritt aus

Manuelle Steuerungsoptionen im Ausführungsarbeitsbereich. Schritt in überträgt die Steuerung für manuelle Eingaben an den Anwender, z. B. Eingabe eines OTP oder CAPTCHA. „Step out“ gibt die Kontrolle an den KI-Agenten zurück, um die Automatisierung fortzusetzen.

T

Glossarbegriffe sind alphabetisch gruppiert.

Tool

Desktop-Aktion, die aktiviert und einem KI-Agenten in hinzugefügt wurde KI-Agenten-Studio. Tools bieten KI-Agenten die Fähigkeiten, bestimmte Aufgaben während der Ausführung auszuführen. Ein KI-Agent wählt ein Tool basierend auf seinem Namen und seiner Beschreibung aus.