Web ベースのタスク用のアダプティブデスクトップアクション

  • リリースバージョン: Australia
  • 更新日 2025年09月05日
  • 所要時間:6分
  • 適応パスのデスクトップアクションを使用すると、AI エージェントは、事前構成された API、スクリプト、またはその他のバックエンドロジックなしで、Web アプリケーションや Web サイト全体で反復的なタスクを自動化できます。 デスクトップアクションを使用すると、AI エージェントは クリック、入力、スクロールと同じように ブラウザ拡張機能を介して Web サイトまたは Web アプリケーションにアクセスして操作し、ユーザーに代わってアクションを実行できます。

    アダプティブデスクトップアクション の概要

    デスクトップアクションは、AI エージェントがブラウザ拡張機能を介して Web アプリケーションとやり取りするために使用するツールです。AI エージェントを構成し、デスクトップアクションをツールとして選択する場合は、AI エージェントが定義されたパス ( AI デスクトップアクションで設計された固定ステップ) に従うか、適応パス (ツール構成に記述されている高レベルの目標) に従うかを定義します。事前設定されたワークフローに従う定義済みパスデスクトップアクションとは異なり、アダプティブパスデスクトップアクションを使用すると、AI エージェントは高レベルの指示に基づいてタスクを動的に計画および実行できます。

    これらの AI エージェントは、ブラウザ拡張機能を介してブラウザにアクセスし、事前設定された API、スクリプト、その他のバックエンドロジックは使用しません。これらは、UI ステータスを処理し、UI アクションによって後続のアクションを決定する、インタラクティブで目に見えるアシスタントとして機能します。ユーザーロールの更新からメンテナンスのスケジュール設定まで、必要なものを AI エージェントに伝えるだけで、AI エージェントが代わりに作業を処理します。 AI エージェントは、手動介入を必要とせずに、別のブラウザタブでこれらのタスクを実行します。人間が UI を操作するのと同様の方法で、画面状態を分析し、UI 要素を特定し、構成された指示に基づいて次のアクションを選択するというタスクを実行します。 手動でタスクを完了するように制御することもできます。

    アダプティブデスクトップアクションの仕組み

    1. 要求の開始:ユーザーが Now Assist パネルでタスクを記述します。たとえば、「ネットワークチームにアサインされたすべてのオープンインシデントを更新して、簡単な説明に優先度レベルを含めます」などです。
    2. エージェントのアクティブ化:AI エージェントがトリガーされ、要求を分析します。
    3. ツールの選択:AI エージェントは、適応パス用に構成されたデスクトップアクションツールを使用する必要があることを識別します。
    4. 計画の生成:AI エージェントは、ツール構成の高レベルの指示に基づいてステップバイステップの計画を作成します。
    5. ユーザー確認:計画は、 Now Assist パネルで承認のためにユーザーに提示されます。
    6. 実行:確認すると、AI エージェントは別のブラウザタブを開き、タスクを実行します。
    7. ビジュアルフィードバック:各ステップのスクリーンショットがNow Assistパネルの [Web ビュー] タブに表示されるため、進捗状況を監視できます。

    LLM プロバイダー

    アダプティブデスクトップアクション AWS Anthropic Sonnet モデルプロバイダーを使用します。

    ユーザー

    適応パスデスクトップアクションは、エンタープライズアプリケーション間でタスクを実行し、反復的な作業を自動化するすべてのユーザー向けに設計されています。

    ユーザー 説明
    アドミニストレーター 権限、ロール、エージェント型ワークフローの管理
    開発者 デスクトップアクションツールを使用して AI エージェントを構築して構成します
    履行者 複数のシステムにわたる日常的な履行タスクの自動化
    要求者 ブラウザ拡張機能を管理し、AI エージェントをトリガーして Web ワークフローを自動化する要求を送信します

    アダプティブデスクトップアクションの構成

    1. AI エージェントとエージェント型ワークフローを作成または編集します。
    2. ツール選択ステップで、[ デスクトップアクション] を選択します。
    3. 適応パスの場合は、ツール構成の高レベルの目標を記述します ( AI デスクトップアクション での設計作業は必要ありません)。
    4. 権限とブラウザ拡張機能の設定の構成
    注:
    エンドユーザーは、 Google Chrome ブラウザ拡張機能をローカルにダウンロードしてインストールし、ターゲット ServiceNow インスタンスに接続するように構成する必要があります。詳細については、「アダプティブデスクトップアクション用の Google Chrome 拡張機能をインストールする」を参照してください。

    ServiceNowインスタンスで、アドミンは AI エージェントを含むエージェント型ワークフローを少なくとも 1 つ構成する必要があります。詳細については、「Web タスクを自動化するためのエージェント型ワークフローの作成」を参照してください。

    デスクトップアクションの操作

    デスクトップアクションには、拡張チャットが有効になっている Now Assist パネルからアクセスします。AI エージェントは、チャットインターフェイスで進捗状況に関する最新情報を提供します。エージェントが作業すると、次のものが表示されます。

    • チャットでのリアルタイムのステータス更新
    • エージェントが移動する Web ページの定期的なスクリーンショット
    • 外部 Web サイトがログイン認証情報を必要とする場合の通知

    外部 Web サイトでログインが必要な場合は、チャットでプロンプトが表示されます。[外部 Web サイト] タブに切り替えて認証情報を入力してから、 Now Assist パネルに戻ります。認証が完了すると、エージェントは続行します。

    注:
    チャットを閉じると、機密情報を含むすべてのスクリーンショットを含むチャットログを削除するオプションがあります。

    制限事項

    デスクトップアクションは、次の制限付きでブラウザ拡張機能として動作します。

    • ブラウザ内のコンテンツにのみアクセスできます
    • デスクトップアプリケーションまたはローカルファイルを操作することはできません (ファイルのダウンロードを除く)
    • ローカルファイルシステムからデータをアップロードできません

    ローカルファイルアクセスが必要なタスクの場合は、定義されたパスのデスクトップアクションまたは別の自動化ツールの使用を検討してください。