AI エージェントアナリティクスダッシュボード

AI エージェントアナリティクスダッシュボードを使用して、インスタンスでの AI エージェントの使用と効率の向上を追跡します。ダッシュボードでは、AI エージェントを使用して解決までの時間とクローズされたタスクの数を改善する方法の傾向を明らかにすることができます。

必要な ServiceNow AI Platform ロール

AI エージェントアナリティクスダッシュボードを使用するには、sn_aia.viewer または sn_aia.admin ロールが必要です。

ダッシュボードを変更する場合は、ダッシュボードを複製して、そのコピーに変更を適用する必要があります。システムプロパティ sn_aia.analytics_dashboard_sysidのダッシュボードsys_idを置き換えることで、AI エージェントスタジオのアナリティクスページを新しいダッシュボードにリダイレクトできます。

AI エージェントアナリティクスダッシュボードへのアクセス

ダッシュボードを開くには、次の場所に移動します。 すべて > AI エージェントスタジオ > アナリティクス.

AI エージェントスタジオ概要ページからダッシュボードにアクセスすることもできます。[最近のエージェントワークフローと AI エージェントアクティビティ] セクションに移動し、[ アナリティクスを表示 ] リンクを選択します。

インジケーター

ほとんどのインジケーターは毎日更新されます。レイテンシインジケーターは 15 分ごとに更新されます。

Now Assist AI エージェントをインストールしたら、[Now Assist AI エージェント] 履歴データコレクションジョブを実行して初期データを収集できます。他のデータ収集ジョブである [Now Assist AI エージェント] 日次データ収集と [Now Assist AI エージェント] 定期的なデータ収集では、インジケーターが更新されます。

表 : 1. AI エージェントの自動インジケーター

名前	説明
エージェント型ワークフローのレイテンシ	エージェントワークフローの完了にかかる時間。
AI エージェント実行計画 P90 レイテンシ	システム内の AI エージェント実行計画の 90% を処理するのにかかった時間。
AI エージェント実行計画 P95 レイテンシ	システムでの AI エージェント実行計画の 95% の処理に要した時間。
AI エージェント実行計画 P99 レイテンシ	システム内の AI エージェント実行計画の 99% が処理されるまでにかかった時間。
AI エージェントレイテンシ	システム内の AI エージェントが処理されるのにかかる時間。
すべてのエージェントワークフロー	本日より前に作成されたエージェントワークフローの合計数。
すべての AI エージェント	本日より前に作成された AI エージェントの合計数。
すべてのツール	本日より前に作成されたツールの合計数。
LLM P90 レイテンシ	システム内の LLM 要求の 90% を処理するのにかかった時間。
LLM P95 レイテンシ	システム内の LLM 要求の 95% が処理されるまでにかかった時間。
LLM P99 レイテンシ	システム内の LLM 要求の 99% が処理されるまでにかかった時間。
クローズ済みタスクの数	クローズされたタスクの合計数。
AI エージェントアシストによるクローズ済みタスクの数	エージェントワークフローまたは AI エージェントによってクローズされた、本日クローズされたタスクの合計数。
クローズ済みタスクの合計期間	タスクのクローズに要した合計時間。
AI エージェントアシストによるクローズ済みタスクの合計期間	エージェントワークフローまたは AI エージェントでクローズされたタスクを今日クローズするためにかかった合計時間。
ツール実行 P90 レイテンシ	システムでのツール実行の 90% の処理にかかる時間。
ツール実行の P95 レイテンシ	システム内のツール実行の 95% を処理するのにかかった時間。
ツール実行 P99 レイテンシ	システム内のツール実行の 99% の処理に要した時間。
ツールレイテンシ	システム内のツールの処理にかかる時間。
CS 会話の合計数	Now Assist パネルまたは仮想エージェントでの会話の合計数。
実行計画の合計数	今日、エージェントワークフローと AI エージェントによって作成された実行計画の合計数。
実行タスクの合計数	今日、エージェントワークフローと AI エージェントによって実行されたタスクの合計数。
ツール実行の合計数	今日のエージェントワークフローと AI エージェントでのツール実行の合計数。
ユースケース実行計画 P90 レイテンシ	システム内のエージェントワークフローの 90% の処理にかかる時間。
ユースケース実行計画 P95 レイテンシ	システム内のエージェントワークフローの 95% の処理にかかる時間。
ユースケース実行計画 P99 レイテンシ	システム内のエージェントワークフローの 99% の処理にかかる時間。

表 : 2. AI エージェントの式インジケーター

名前	説明
AI エージェントまたはエージェントワークフローが定義されている会話の割合	AI エージェントまたはエージェントワークフローが定義された Now Assist パネルまたは仮想エージェント内の会話の数を、会話の合計数で割った値。
タスクのクローズまでの平均時間	タスクの作成からクローズまでの平均所要時間。
AI エージェントアシストによるタスクの平均クローズ所要時間	エージェントが関与するタスクの作成からクローズまでの平均時間 (エージェントワークフローまたは AI エージェントが関与)。
効率の向上	AI エージェントアシストありのタスクのクローズに要した平均時間と、AI エージェントアシストなしでクローズされたタスクを比較する効率向上率。
AI エージェントを使用してクローズされたタスクの割合	AI エージェントとエージェントワークフローを使用してクローズされたタスクの数をタスクの合計数で割った値。

ブレークダウン

さまざまなブレークダウンを使用すると、データを異なる方法で分割して、AI エージェントの使用状況の特定の側面を追跡できます。すべてのインジケーターですべてのブレークダウンを使用できるわけではありません。

• エージェント型ワークフロー
• AI エージェント
• AI エージェントの実行ステータス
• レイテンシメトリクス
• ツール
• ツールレイテンシメトリクス

フィルター

データをフィルタリングして、傾向のサブセットを確認できます。次の表に、AI エージェントアナリティクスダッシュボードで利用可能なフィルターを示します。

表 : 3. AI エージェントアナリティクスダッシュボードページのフィルター

ページ	利用可能なフィルター
ステータス	作成時刻
インサイト	作成時刻 エージェント型ワークフロー AI エージェント AI エージェントタイプ
アシスト消費数	作成時刻 エージェント型ワークフロー AI エージェント AI エージェントタイプ
パフォーマンス	作成時刻 エージェント型ワークフロー AI エージェント AI エージェントタイプ ツール
トラブルシューティング	作成時刻

データの可視化

可視化は、データの傾向、パーセンテージ、およびスコアを確認するために使用できるグラフィック要素です。AI エージェントアナリティクスダッシュボードには、次の可視化が含まれています。

表 : 4. AI エージェントアナリティクスダッシュボードの概要ページでのデータの可視化

タイトル	タイプ	説明
過去 7 日間の AI エージェントの平均推定 CSAT	スコアカード	顧客が AI 応答を評価する内容を推定する AI 生成スコア。1 はユーザーが非常に不満であり、5 はインタラクションに非常に満足しています。
過去 7 日間の実行タスク	円グラフ	ステータス (成功、進行中、キャンセル、キューに格納) で表示された実行タスク。
過去 90 日間の AI エージェントエラー	線グラフ	過去 90 日以内に AI エージェントが確認したエラーの数を週別に分類。
AI エージェントツールタイプ	円グラフ	タイプ別に分類されたツール。例:スクリプト、フローアクション、サブフローなど。
AI エージェントツール実行モード	円グラフ	自律実行モードまたは監視実行モードで分類されたツール。
過去 7 日間の実行計画	円グラフ	ステータス (完了、終了、最終作業、または処理中) で分割された実行計画
AI エージェントの実行	リスト	AI エージェントの実行のリスト。リストは、AI エージェントと AI エージェントの実行ステータス別に分類されます。列は複数の週にまたがり、現在の週と前の週を比較した変化率と傾向ラインがあります。
エージェント型ワークフローの数	傾向ライン	エージェントワークフローの合計数。前日作成されたエージェントワークフローと傾向ラインが表示されます。
AI エージェントの数	傾向ライン	AI エージェントの合計数。前日作成された AI エージェントと傾向ラインが表示されます。
ツールの数	傾向ライン	ツールの合計数。前日作成されたツールとトレンドラインが表示されます。
AI エージェントの実行計画	リスト	AI エージェント実行計画のリスト。リストはエージェントワークフロー別に分類されます。列は複数の週にまたがり、現在の週と前の週を比較した変化率と傾向ラインがあります。

表 : 5. AI エージェントアナリティクスダッシュボードステータスページでのデータの可視化

タイトル	タイプ	説明
AI エージェントの実行計画	スコアカード	実行計画のステータス ([準備完了]、[現在進行中]、[完了]、[終了]) ごとに 1 つずつ、計 4 枚のスコアカード。
AI エージェントの実行	スコアカード	実行計画のステータス (現在進行中、完了、成功、エラー/キャンセル) ごとに 1 つずつ、計 4 枚のスコアカード。
AI エージェント/ツール実行	リスト	AI エージェントとツールの実行のリスト。リストは AI エージェントとツール別に分類され、各ステータス (キャンセル、進行中、キューに格納、成功) の列があります。

表 : 6. AI エージェントアナリティクスダッシュボードのインサイトページでのデータの可視化

タイトル	タイプ	説明
AI エージェントを使用してクローズされたタスク	傾向ライン	AI エージェントを使用してクローズされたタスクの割合。トレンドラインが表示されます。
AI エージェントを使用したタスククローズの効率向上	傾向ライン	エージェントワークフローと AI エージェントによって効率が向上しました。トレンドラインが表示されます。
AI エージェント支援による平均クローズ所要時間	傾向ライン	AI エージェントまたはエージェントワークフローが関与するタスクの作成からクローズまでの平均所要時間。トレンドラインが表示されます。
AI エージェントの推定 CSAT	スコアカード	AI エージェントの応答の主観的な品質に基づいて AI を使用して計算された推定 CSAT スコア。1 はユーザーが非常に不満であり、5 はインタラクションに非常に満足しています。
推定セッション CSAT	スコアカード	ユーザーのセッションインタラクション全体に基づいて AI を使用して計算された推定 CSAT スコア。1 はユーザーが非常に不満であり、5 はインタラクションに非常に満足しています。
エージェント型ソリューションを使用する場合の上位のユーザーインテント	棒グラフ	LLM によって解釈される最も一般的なユーザーのインテント。インテントは グループアクションフレームワーク別にグループ化されます。
インテント別の平均 AI エージェント CSAT	棒グラフ	LLM によって解釈される各ユーザーインテントの平均 CSAT スコア。インテントは グループアクションフレームワーク別にグループ化されます。
AI エージェントを使用した転送とエスカレーション	棒グラフ	ユーザーがエスカレーションを要求したか、別の AI エージェントまたは人間への転送があったかを示す、AI を使用した推定スコア。
AI エージェントに必要なユーザー労力	棒グラフ	ユーザーが AI エージェントとのインタラクション中に費やさなければならなかった時間とエネルギーを測定する、AI 生成スコアの数。値は、低、中、高の 3 段階スケールです。
AI エージェントが推奨する次のステップ	棒グラフ	AI エージェントが結果を要約し、該当する場合、顧客が次に何をすべきかについての明確な指示またはガイダンスを提供したかどうかを示す、AI 生成スコアの数。値は、低、中、高の 3 段階スケールです。
AI エージェントがユーザー要求を解決しました	スコアカード	AI エージェントがユーザーの要求を解決したかどうかを示す AI 生成スコア。値は、[はい]、[いいえ]、または [不明] です。
AI エージェントに対するユーザーの不満	棒グラフ	ユーザーが会話の任意の時点で不満を表明したかどうかを示す AI 生成スコア。
AI エージェントの共感	スコアカード	AI エージェントが共感的で友好的であったかどうかを示す AI 生成スコア。値は、低、中、高の 3 段階スケールです。
ユーザーまたは AI エージェントの混乱	棒グラフ	会話の任意の時点でユーザーまたは AI エージェントが混乱しているかどうかを示す、AI 生成スコアの数。
セッション CSAT が最も高い、上位 10 件のエージェント型ワークフロー	棒グラフ	最高の CSAT スコアによる上位 10 件のエージェントワークフロー。
セッション CSAT が最も高い、下位 10 件のエージェント型ワークフロー	棒グラフ	CSAT スコアに基づく下位 10 件のエージェントワークフロー。
セッション CSAT が最も高い、上位 10 件の AI エージェント	棒グラフ	最高の CSAT スコアによる上位 10 件の AI エージェント。
セッション CSAT が最も高い、下位 10 件の AI エージェント	棒グラフ	CSAT スコアに基づく下位 10 件の AI エージェント。
AI エージェントの日次会話	傾向ライン	Now Assist パネルまたは仮想エージェントでの AI エージェント会話の合計数。トレンドラインが表示されます。
AI エージェントを使用した会話の割合 (%)	傾向ライン	エージェントワークフローまたは AI エージェントを使用した Now Assist パネルまたは仮想エージェントでの AI エージェント会話の割合。トレンドラインが表示されます。
効率向上サポートインジケーター	リスト	インジケーターのリスト。リストはインジケーター別に分類されます。列は複数のタイムスパンにまたがります。

表 : 7. AI エージェントアナリティクスダッシュボードアシスト消費ページでのデータの可視化

タイトル	タイプ	説明
AI エージェントアシストの合計	スコアカード	AI エージェントとエージェントワークフローの両方でインスタンスで使用されているアシストの合計数。
階層ごとの AI エージェントアシストの合計	円グラフ	階層別に割ったアシストの合計と割合。ツールの実行回数が 20 回を超えるまで、アシストは小としてマークされます。
アシスト階層ごとの AI エージェントの実行数。	円グラフ	AI エージェントとエージェントワークフローの両方のアシスト階層の数。ツールの実行回数が 20 回を超えるまで、アシストは小としてマークされます。
アシストを消費する上位 10 件のエージェント型ワークフロー	円グラフ	アシストを消費した上位 10 件のエージェント型ワークフローの中で消費されたアシストの割合。
AI エージェントアシストの合計	棒グラフ	AI エージェントによって使用されたアシストの合計数 (日別)。
アシスト階層ごとの AI エージェントの実行数	棒グラフ	AI エージェントによって使用されたアシスト数をアシスト階層と日別に分類。
エージェントワークフローごとの AI エージェントの実行数	棒グラフ	AI エージェントによって使用されたアシストの数 (エージェントワークフロー別)。
AI エージェントごとの AI エージェントアシストの合計	棒グラフ	AI エージェントによって使用されたアシスト数 (AI エージェント別)。
エージェント型ワークフローあたりの平均ツール実行回数	リスト	エージェントワークフローによって実行されたツールの数。エージェントワークフローと日別に分類されます。
アシスト階層あたりの平均ツール実行数	リスト	エージェントワークフローによって実行されたツールの数 (アシスト階層と日別)。

表 : 8. AI エージェントアナリティクスダッシュボードのパフォーマンスページでのデータの可視化

タイトル	タイプ	説明
P90 エージェント型ワークフローのレイテンシ	スコアカード	システム内のエージェントワークフローの 90% を処理する時間 (秒)。
P95 エージェント型ワークフローのレイテンシ	スコアカード	システム内のエージェントワークフローの 95% を処理する時間 (秒)。
P99 エージェント型ワークフローのレイテンシ	スコアカード	システム内のエージェントワークフローの 99% を処理する時間 (秒)。
1 時間あたりに実行されたエージェント型ワークフローの合計数	棒グラフ	実行された時刻エージェントワークフローの時間ごとの可視化。
1 時間あたりのエージェント型ワークフローのエラーの合計数	棒グラフ	実行された時刻のエージェントワークフローの可視化。時間単位。
エージェント型ワークフローのレイテンシ	線グラフ	エージェントワークフローの経時的なレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
エージェント型ワークフローのレイテンシ (週次平均)	線グラフ	エージェントワークフローの経時的なレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
エージェント型ワークフローのレイテンシ (日次平均)	テーブル	今日のエージェントワークフローの平均レイテンシ。各行はエージェントワークフローであり、各列は異なるレイテンシメトリクスです。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
P90 AI エージェントレイテンシ	スコアカード	システムでの AI エージェント実行の 90% を処理する時間 (秒)。
P95 AI エージェントレイテンシ	スコアカード	システムでの AI エージェント実行の 95% を処理する時間 (秒)。
P99 AI エージェントレイテンシ	スコアカード	システムでの AI エージェント実行の 99% を処理する時間 (秒)。
1 時間あたりに実行された AI エージェントの合計数	棒グラフ	実行された時刻の可視化 AI エージェントの実行時間単位。
1 時間あたりの AI エージェントの合計エラー数	棒グラフ	AI エージェントの実行でエラーが発生した時刻を時間単位で可視化します。
AI エージェントレイテンシ	線グラフ	時間フィルター内の AI エージェントのレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
AI エージェントのレイテンシ (週次平均)	線グラフ	週ごとの経時的な AI エージェントのレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
AI エージェントのレイテンシ (日次平均)	テーブル	本日の平均 AI エージェントレイテンシ。各行は AI エージェントで、各列は異なるレイテンシメトリクスです。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
P90 ツールレイテンシ	スコアカード	システムでのツール実行の 90% を処理する時間 (秒)。
P95 ツールレイテンシ	スコアカード	システムでのツール実行の 95% を処理する時間 (秒)。
P99 ツールレイテンシ	スコアカード	システムでのツール実行の 99% を処理する時間 (秒)。
1 時間あたりの実行ツールの合計数	棒グラフ	実行された時刻のツール実行時間単位の可視化。
1 時間あたりの合計ツールエラー数	棒グラフ	ツール実行されてエラーが発生した時刻を時間単位で可視化します。
ツールレイテンシ	線グラフ	時間フィルター内のツールレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
ツールレイテンシ (週次平均)	線グラフ	週ごとのツールレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
ツールレイテンシ (日次平均)	テーブル	今日の平均ツールレイテンシ。各行はツールであり、各列は異なるレイテンシメトリクスです。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
P90 LLM レイテンシ	スコアカード	システム内の LLM 要求の 90% を処理する時間 (秒)。
P95 LLM レイテンシ	スコアカード	システム内の LLM 要求の 95% を処理する時間 (秒)。
P99 LLM レイテンシ	スコアカード	システム内の LLM 要求の 99% を処理する時間 (秒)。
LLM レイテンシ	線グラフ	時間フィルター内のツールレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
LLM レイテンシ (週次平均)	線グラフ	週ごとのツールレイテンシ。3 つの異なるインジケーターを使用します。P90 は最速の 90% の実行を追跡し、P95 は最速の 95% の実行を追跡し、P99 は最速の 99% の実行を追跡します。
1 時間あたりの LLM コール数	棒グラフ	LLM コールが行われた時刻を時間単位で可視化します。
1 時間あたりの LLM エラー数	棒グラフ	LLM コールが行われ、エラーが発生した時刻を時間単位で可視化します。

表 : 9. AI エージェントアナリティクスダッシュボードのトラブルシューティングページでのデータの可視化

名前	タイプ	説明
エージェント型ワークフローのエラー	リスト	エージェントワークフローエラーのリスト。

エージェント型 AI のセキュリティコントロールの詳細については、「 AI エージェントのセキュリティ」を参照してください。

表 : 10. AI エージェントアナリティクスダッシュボードのセキュリティページでのデータの可視化

名前	タイプ	説明
ブロックされた実行の合計数	スコアカード	セキュリティコントロールのためにブロックされたエージェント型 AI 実行の合計数。
ブロックされた実行の合計数	リスト	ブロックされた実行のリスト。
実行がブロックされている上位のエージェント型ワークフロー	リスト	ブロックされた実行が最も多いエージェント型ワークフローのリスト。
実行がブロックされている上位 AI エージェント	リスト	ブロックされた実行が最も多い AI エージェントのリスト。
ACL が定義されていないエージェント型ワークフロー	スコアカード	ユーザーアクセスの ACL がないエージェント型ワークフローの合計数。
エージェント型ワークフロー ACL	円グラフ	ユーザーアクセスの ACL があるエージェント型ワークフローとないエージェント型ワークフローの割合を示す円グラフ。
ACL が定義されていないエージェント型ワークフロー	リスト	ユーザーアクセス用の ACL がないエージェント型ワークフローのリスト。
ACL が定義されていない AI エージェント	スコアカード	ユーザーアクセスの ACL がない AI エージェントの合計数。
AI エージェント ACL	円グラフ	ユーザーアクセス用の ACL がある AI エージェントとない AI エージェントの割合を示す円グラフ。
ACL が定義されていない AI エージェント	リスト	ユーザーアクセスの ACL がない AI エージェントのリスト。
ロールマスクを使用しないエージェント型ワークフロー	スコアカード	ロールマスクとデータアクセスのために識別されたロールのないエージェント型ワークフローの合計数。
ロールマスクを使用しないエージェント型ワークフロー	リスト	ロールマスクとデータアクセスのために識別されたロールのないエージェント型ワークフローのリスト。
ロールマスクのない AI エージェント	スコアカード	ロールマスクとデータアクセスのために識別されたロールを持たない AI エージェントの合計数。
ロールマスクのない AI エージェント	リスト	ロールマスクとデータアクセスのために識別されたロールを持たない AI エージェントのリスト。
動的ユーザーとして実行されているエージェント型ワークフロー	スコアカード	動的ユーザーとして実行されているエージェント型ワークフローの合計数。
動的ユーザーとして実行されているエージェント型ワークフロー	リスト	動的ユーザーとして実行されているエージェント型ワークフローのリスト。
動的ユーザーとして実行されている AI エージェント	スコアカード	動的ユーザーとして実行されている AI エージェントの合計数。
動的ユーザーとして実行されている AI エージェント	リスト	動的ユーザーとして実行されている AI エージェントのリスト。
AI ユーザーとして実行されているエージェント型ワークフロー	スコアカード	AI ユーザーとして実行されているエージェント型ワークフローの合計数。
AI ユーザーとして実行されているエージェント型ワークフロー	リスト	AI ユーザーとして実行されているエージェント型ワークフローのリスト。
AI ユーザーとして実行されている AI エージェント	スコアカード	AI ユーザーとして実行されている AI エージェントの合計数。
AI ユーザーとして実行されている AI エージェント	リスト	AI ユーザーとして実行されている AI エージェントのリスト。