Adaptive Desktop-Aktionen für webbasierte Aufgaben

  • Freigeben Version: Australia
  • Aktualisiert 5. September 2025
  • 4 Minuten Lesedauer
  • Mit Desktop-Aktionen für adaptive Pfade können KI-Agenten repetitive Aufgaben in Webanwendungen und Websites ohne vorkonfigurierte APIs, Skripts oder andere Back-End-Logik automatisieren. Desktop-Aktionen ermöglichen KI-Agenten Greifen Sie über die Browsererweiterung auf eine Website oder eine Webanwendung zu und interagieren Sie mit ihnen Genauso wie Sie – Klicken, Tippen und Scrollen – Aktionen in Ihrem Namen ausführen würden.

    Adaptive Desktop-Aktionen Übersicht

    Desktop-Aktionen sind Tools, die KI-Agenten verwenden, um über eine Browsererweiterung mit Webanwendungen zu interagieren. Wenn Sie einen KI-Agenten konfigurieren und eine Desktop-Aktion als Tool auswählen, definieren Sie, ob der KI-Agent einem definierten Pfad folgt (feste Schritte in entworfen) KI-Desktop-Aktionen) Oder ein adaptiver Pfad (allgemeines Ziel, das in der Toolkonfiguration beschrieben wird). Im Gegensatz zu definierten Pfad-Desktop-Aktionen, die vorkonfigurierten Workflows folgen, ermöglichen Desktop-Aktionen für adaptive Pfade KI-Agenten die dynamische Planung und Ausführung von Aufgaben basierend auf allgemeinen Anweisungen.

    Diese KI-Agenten greifen über die Browsererweiterung auf den Browser zu und verwenden keine vorkonfigurierten APIs, Skripts oder andere Back-End-Logik. Sie fungieren als interaktive, sichtbare Assistenten, die UI-status verarbeiten und nachfolgende Aktionen durch UI-Aktionen bestimmen. Teilen Sie einem KI-Agenten einfach mit, was Sie benötigen, von der Aktualisierung von Anwenderrollen bis zur Planung von Wartungsarbeiten, und er übernimmt die Arbeit für Sie . Der KI-Agent führt diese Aufgaben in einer separaten Browserregisterkarte aus, ohne dass ein manuelles Eingreifen erforderlich ist . Es führt Aufgaben auf ähnliche Weise aus wie Menschen, die mit der UI interagieren: Analyse des Bildschirmstatus, Identifizierung von UI-Elementen und Auswahl der nächsten Aktion basierend auf den konfigurierten Anweisungen. Sie können auch die Kontrolle übernehmen, um die Aufgabe manuell abzuschließen.

    Funktionsweise von adaptiven Desktop-Aktionen

    1. Anforderungsinitiierung: Der Anwender beschreibt eine Aufgabe in Now AssistBereich. Beispiel: „Alle offenen Incidents aktualisieren, die dem Netzwerkteam zugewiesen sind, um die Prioritätsstufe in die Kurzbeschreibung aufzunehmen“.
    2. Agent-Aktivierung: Der KI-Agent wird ausgelöst und analysiert die Anforderung.
    3. Toolauswahl: Der KI-Agent identifiziert, dass das Desktop-Aktionstool verwendet werden muss, das für adaptive Pfade konfiguriert ist.
    4. Plangenerierung: Der KI-Agent erstellt einen Schritt-für-Schritt-Plan basierend auf den allgemeinen Anweisungen in der Toolkonfiguration.
    5. Anwenderbestätigung: Der Plan wird dem Anwender zur Genehmigung in vorgelegt Now AssistBereich.
    6. Ausführung: Nach der Bestätigung öffnet der KI-Agent eine separate Browserregisterkarte und führt die Aufgabe aus.
    7. Visuelles Feedback: Screenshots jedes Schritts werden in angezeigt Webansicht Registerkarte von Now AssistBereich, damit Sie den Fortschritt überwachen können.

    LLM-Anbieter

    Adaptive Desktop-Aktionen verwenden AWS Anthropic Sonnet-Modellanbieter.

    Anwender

    Desktop-Aktionen für adaptive Pfade sind für alle Anwender konzipiert, die Aufgaben in Enterprise-Anwendungen ausführen und sich wiederholende Arbeit automatisieren möchten:

    Anwender Beschreibung
    Administratoren Verwalten Sie Berechtigungen, Rollen und Agenten-Workflows
    Entwickler Erstellen und konfigurieren Sie KI-Agenten mit Desktop-Aktionstools
    Erfüller Automatisieren Sie routinemäßige Erfüllungsaufgaben über mehrere Systeme hinweg
    Anfordernde Personen Verwalten Sie Browsererweiterungen, und übermitteln Sie Anforderungen, die KI-Agenten zur Automatisierung von Web-Workflows auslösen

    Adaptive Desktop-Aktionen werden konfiguriert

    1. Erstellen oder bearbeiten Sie einen KI-Agenten und einen Agenten-Workflow.
    2. Wählen Sie im Schritt „Toolauswahl“ aus Desktop-Aktion .
    3. Beschreiben Sie für adaptive Pfade das allgemeine Ziel in der Toolkonfiguration (keine Designarbeit in KI-Desktop-Aktionen Ist erforderlich.)
    4. Konfigurieren Sie Berechtigungen und Browsererweiterungseinstellungen
    Hinweis:
    Endanwender müssen herunterladen und installieren Google Chrome Browsererweiterung lokal und konfigurieren Sie sie, um eine Verbindung zu einem Ziel herzustellen ServiceNow Instanz. Weitere Informationen finden Sie unter Installieren Sie Google Chrome Erweiterung für adaptive Desktop-Aktionen.

    Auf ServiceNow Instanz muss ein Administrator mindestens einen Agenten-Workflow konfigurieren, an dem ein KI-Agent beteiligt ist. Weitere Informationen finden Sie unter Erstellen Sie einen Agenten-Workflow zur Automatisierung von Webaufgaben.

    Desktop-Aktionen werden ausgeführt

    Sie greifen über auf Desktop-Aktionen zu Now Assist Bereich, für den der erweiterte Chat aktiviert ist. Der KI-Agent stellt Updates zu seinem Fortschritt in der Chat-Schnittstelle bereit. Während der Arbeit des Service Desk-Mitarbeiters erhalten Sie:

    • Statusaktualisierungen in Echtzeit im Chat
    • Regelmäßige Screenshots der Webseiten, auf denen der Service Desk-Mitarbeiter navigiert
    • Benachrichtigungen, wenn externe Websites Anmeldeinformationen erfordern

    Wenn eine externe Website eine Anmeldung erfordert, werden Sie im Chat dazu aufgefordert. Wechseln Sie zur Registerkarte „externe Website“, geben Sie Ihre Anmeldeinformationen an, und wechseln Sie dann zurück zu Now Assist Bereich. Der Agent setzt fort, sobald die Authentifizierung abgeschlossen ist.

    Hinweis:
    Wenn Sie den Chat schließen, haben Sie die Möglichkeit, das Chat-Protokoll einschließlich aller Screenshots mit vertraulichen Informationen zu löschen.

    Einschränkungen

    Desktop-Aktionen funktionieren als Browsererweiterungen mit den folgenden Einschränkungen:

    • Kann nur auf Inhalte innerhalb des Browsers zugreifen
    • Kann nicht mit Desktop-Anwendungen oder lokalen Dateien interagieren (mit Ausnahme des Downloads von Dateien)
    • Daten können nicht aus dem lokalen Dateisystem hochgeladen werden

    Für Aufgaben, die lokalen Dateizugriff erfordern, sollten Sie definierte Pfad-Desktop-Aktionen oder alternative Automatisierungstools verwenden.