Einstein ボット標準レポートの操作

メモ

エンゲージされたセッションについての詳細は、「エンゲージされたセッション、ボットの請求、ボットのパフォーマンス」を参照してください。

目標についての詳細は、「目標を使用したボットのパフォーマンスの最適化」を参照してください。

重要 Einstein ボットの記事の回答は 2026 年 9 月 30 日に廃止されます。 この日付以降、記事の回答を使用するボットはKnowledgeベースのコンテンツを配信しなくなります。「Einsteinボット廃止の記事の回答」を参照してください。Knowledge BaseからKnowledge Contentを継続的に提供し、記事の回答の廃止後に中断を回避するには、Generative Knowledge Answerへの移行を検討してください。

Einstein ボットには、1 つの期間内のさまざまなボット活動を追跡するさまざまな標準レポートが用意されています。標準レポートでは、ボット評価指標日次オブジェクト (ConvDefDialogDailyMetric)、ボット評価指標時次オブジェクト (ConvDefDialogHourlyMetric)、セッション評価指標オブジェクト (ConversationDefinitionSession) の項目が使用されます。標準レポートのデータは 1 時間以内に入力されます。

含まれているほとんどのレポートでは、時間、評価指標種別、値の 3 つのデータパラメーターを使用します。

• 時間: 過去 30 日間を対象とするレポートでは、[評価指標日時] 項目が使用されます。今日を対象とするレポートでは、[時間] 項目が使用されます。
• 評価指標種別: [評価指標種別] 項目は、レポートで取得される活動を参照します。たとえば、例外評価指標では、ボットでエラーが発生するたびに追跡します。
• 値: [値] 項目では、評価指標種別の数を参照します。

メモ セッション総計値オブジェクトを使用するレポート ([すべてのボットセッション]、[エンゲージされたセッションとエンゲージされていないセッション]、[ダイアログで終了したセッション] など) の構造は異なります。時間には、[セッション開始時刻] と [時間] を使用します。特定のセッションを追跡するため、評価指標種別は使用しません。値には、それ自体の行数か、いずれかの計数項目の合計 (入力メッセージ数など) を使用します。

次に、過去 30 日間のダイアログのエントリポイントの標準レポートの例を示します。顧客がボットの会話でダイアログをトリガーする方法を追跡します。トリガーには、手動ユーザー選択、[ルールアクション] ステップや [次のステップ] ダイアログなどのシステムリダイレクトが含まれます。インテント対応ダイアログの場合、トリガーには成功した完全一致またはインテント認識も含まれます。

レポートは過去 30 日間を対象とするため、ボット評価指標日次オブジェクト (ConvDefDialogDailyMetric) と [評価指標日時] 項目の項目が入力されます。評価指標種別には、ボットが新しいダイアログを開くたびに捕捉する [ダイアログオープン済み] が使用されます。

メモ Bot Metrics Daily (ボット評価指標の日次) レポートには日付と時間が GMT で表示され、個々のユーザーのタイムゾーンは反映されません。

次の表は、行をボットの [定義名]、[ダイアログ定義名]、[ダイアログエントリポイント] 項目でグループ化したものです。値列には、過去 30 日以内にボットが特定のエントリポイントからダイアログを開始した回数が表示されます。顧客が手動で [メインメニュー] ダイアログに 4 回移動した。顧客が他のダイアログを完了すると、さらに 4 回メインメニューに自動的に転送されます。

使用可能な評価指標種別は、レポートの作成に使用されるオブジェクトに応じて異なります。評価指標種別には次のようなものがあります。

• Action Executed (実行されたアクション): フロー、Apex、メールを送信、オブジェクト検索などのアクションダイアログステップが完了しました。
• AllELUCalled: ボットがエンティティを抽出するか、インテントを識別します。
• 選択された記事: ユーザーが記事の回答によって提供された記事を選択しました。
• 記事のフィードバック数: ユーザーが記事の回答によって提供された記事に関するフィードバックを返し、ボットはそのフィードバックを 1 つのフィードバックインスタンスとして計数します。記事の肯定的なフィードバックの平均スコアの場合、記事のフィードバック合計が記事のフィードバック数で除算されます。
• 記事のフィードバック合計: ボットは、記事の回答によって提供された記事の肯定的なフィードバックのスコアを合計します。記事の肯定的なフィードバックの平均スコアの場合、記事のフィードバック合計が記事のフィードバック数で除算されます。
• Cancel Dialog (キャンセルダイアログ): ユーザーが元のダイアログを完了したり会話を終了したりせずに現在のダイアログから退出し、新しいダイアログを開始しました。
• 困惑: ボットは 1 つ以上のユーザー入力をインテントまたはエンティティと照合できません。
• 選択された選択肢: 顧客が [質問] ダイアログステップで選択肢を選択しました。
• Dialog Completed (ダイアログ完了): ユーザーが現在のダイアログのすべてのステップを完了してから次のダイアログを開始しました。
• ダイアログが開く: ボットがダイアログを開きます。
• ダイアログが閉じました: ボットがダイアログを閉じます。
• ELU Boolean が抽出されました: ボットが Boolean エンティティを抽出しました。
• ELU エンティティがコールされました: ボットがエンティティを抽出しました。
• ELU インテントがコールされました: ボットがインテント認識を介してインテントを識別しました。
• Engaged Session Count (エンゲージされたセッション数): 組織内のすべてのボットでエンゲージされたセッションの数。
• エスカレーション: サービス担当者への転送要求。
• 例外: ボットでエラーが発生しました。
• 転送に失敗したセッション件数: 転送の試行に 1 回以上失敗したセッションの件数。
• 目標完了: 一般的な顧客の目標が完了とみなされるダイアログフローで、システム管理者が定義したポイントにユーザーが達しています。目標を定義するには、システム管理者が [目標] ダイアログステップをダイアログに追加します。
• NLP インテントがコールされました: ボットが完全一致またはインテント認識を介してインテントを識別しました。
• セッションが開始されました: ボットセッションが開始されました。
• セッションが終了しました: ボットセッションが終了しました。
• セッションがエンゲージされました: ボットセッション内で、ユーザーが少なくとも 1 つのメッセージを送信したか、少なくとも 1 つのメニューオプションまたは選択肢をクリックしたセッションです。
• 転送済み: ボットがセッションをサービス担当者または別のボットに転送しました。

Einstein ボットレポートフォルダーのレポートには、以下が含まれます。

• 過去 30 日間のすべてのボットセッション: 過去 30 日間の日別のすべてのボットセッション。
• 今日のすべてのボットセッション: 今日の時間別のすべてのボットセッション。
• 過去 30 日間に選択された記事: 過去 30 日間に各ボットの記事の回答によって提供された記事から選択された記事の数。
• 今日の選択された記事数: 今日、各ボットの記事の回答によって提供された記事から選択された記事の数。
• Article Positive Feedback Last 30 Days (過去 30 日間の記事の肯定的なフィードバック): 過去 30 日間に [記事の回答] で選択された各記事の肯定的なフィードバックの数。
• Article Positive Feedback Today (今日の記事の肯定的なフィードバック): 今日 [記事の回答] で選択された各記事に対して受け取った肯定的なフィードバックの数。
• Boolean Extraction Rate Last 30 Days (過去 30 日間の Boolean 抽出率): 過去 30 日間のボットによる Boolean エンティティの抽出の成功 (はいまたはいいえ) および失敗 (どちらでもない) の試行数。どちらでもない応答の数が比較的多い場合、ボットの設計に改善の余地があることを示している可能性があります。
• Boolean Extraction Rate Today (今日の Boolean 抽出率): 今日の Boolean エンティティの抽出に対するボットの成功 (はいまたはいいえ) および失敗 (どちらでもない) の試行数。どちらでもない応答の数が比較的多い場合、ボットの設計に改善の余地があることを示している可能性があります。
• 過去 30 日間の困惑の頻度: ボットが困惑した回数、および過去 30 日間でユーザーが開いていた最後のダイアログ。ボットが 1 つ以上のユーザー入力をインテントまたはエンティティと照合できない場合、混乱が発生します。
• 今日の困惑の頻度: ボットが困惑した回数、および今日の中でユーザーが開いていた最後のダイアログ。ボットが 1 つ以上のユーザー入力をインテントまたはエンティティと照合できない場合、混乱が発生します。
• 過去 30 日間のダイアログのエントリポイント: 過去 30 日間にユーザーが特定のダイアログに入るために使用したモード数。エントリポイントは次のとおりです。
  • ユーザーナビゲーション: ユーザーが手動でダイアログに移動します。たとえば、ユーザーがメニューからダイアログを選択します。
  • ルールアクション: ユーザーがダイアログの [ダイアログをコール] または [ダイアログにリダイレクト] ルールアクションステップに到達した。ユーザーは、元のダイアログの [ルールアクション] で指定された新しいダイアログに移動します。
  • ダイアログの次のステップ: ユーザーがダイアログを完了すると、ダイアログは元のダイアログの [次のステップ] で指定された新しいダイアログにユーザーを転送します。
  • インテント検出: ユーザーはテキストを入力し、完全一致またはインテント認識の試行に成功したに基づいて新しいダイアログに入ります。
  このレポートを使用して、会話の設計の効果を評価します。
• 今日のダイアログエントリポイント: ユーザーが特定のダイアログに入るためのモードの数。エントリポイントは次のとおりです。
  • ユーザーナビゲーション: ユーザーが手動でダイアログに移動します。たとえば、ユーザーがメニューからダイアログを選択します。
  • ルールアクション: ユーザーがダイアログの [ダイアログをコール] または [ダイアログにリダイレクト] ルールアクションステップに到達した。ユーザーが元のダイアログの [ルールアクション] で指定された新しいダイアログにリダイレクトした。
  • ダイアログの次のステップ: ユーザーがダイアログを完了すると、ダイアログは元のダイアログの [次のステップ] で指定された新しいダイアログにユーザーを転送します。
  • インテント検出: ユーザーが自由テキストを入力し、成功した完全一致またはインテント認識の試行に基づいて新しいダイアログを開始します。
  このレポートを使用して、会話の設計の効果を評価します。
• 過去 30 日間のダイアログの頻度: 過去 30 日間のセッションでのダイアログ使用数。
• 今日のダイアログ頻度: セッションでのダイアログの利用状況の数。
• Dialogs Canceled Last 30 Days (過去 30 日間にキャンセルされたダイアログ数): 過去 30 日間にユーザーによってキャンセルされたボット別のダイアログ数。ダイアログのキャンセルとは、ユーザーが元のダイアログを完了したり会話を終了したりせずに現在のダイアログから退出し、新しいダイアログを開始したことを意味します。
• Dialogs Canceled Today (今日キャンセルされたダイアログ数): 今日ユーザーによってキャンセルされたボット別のダイアログ数。ダイアログのキャンセルとは、ユーザーが元のダイアログを完了したり会話を終了したりせずに現在のダイアログから退出し、新しいダイアログを開始したことを意味します。
• Dialogs Completed Last 30 Days (過去 30 日間に完了したダイアログ数): 過去 30 日間にユーザーが完了したボット別のダイアログ数。ダイアログの完了とは、ユーザーが現在のダイアログのすべてのステップを完了してから次のダイアログを開始したことを意味します。
• Dialogs Completed Today (今日完了したダイアログ数): 今日ユーザーが完了したボット別のダイアログ数。ダイアログの完了とは、ユーザーが現在のダイアログのすべてのステップを完了してから次のダイアログを開始したことを意味します。
• 過去 7 日間に使用されたセッションあたりのダイアログ数: 過去 7 日間に開始されたセッションあたりのダイアログ数の分布。このレポートを使用して、ボットの会話の複雑さを理解します。
• 過去 30 日間の例外が発生したダイアログ: 過去 30 日間に例外が発生したダイアログの数。
• Dialogs with Exceptions Today (今日の例外が発生したダイアログ): 例外が発生したダイアログの数。
• Engaged Session Length Last 7 Days (過去 7 日間のエンゲージされたセッション長): ボット別の過去 7 日間にエンゲージされたすべてのセッションの平均長。セッション長の平均が長いほど、顧客エンゲージメントとボットの効果が高いことを示します。
• 過去 7 日間のエンゲージされたセッション: 過去 7 日間の日別のエンゲージされたセッションとエンゲージされていないセッション。
• エンゲージされたセッション数とエンゲージされていないセッション数の比較 (30 日): 過去 30 日間の日別のすべてのボットのエンゲージされたセッション数とエンゲージされていないセッション数。
• 今日のエンゲージされたセッション数とエンゲージされていないセッション数の比較: 今日の時間別のすべてのボットのエンゲージされたセッション数とエンゲージされていないセッション数。
• 過去 30 日間のエンティティの抽出率: 過去 30 日間のボット別の成功および失敗したエンティティの抽出の試行数。
• 今日のエンティティの抽出率: 今日のボット別の成功および失敗したエンティティの抽出の試行数。
• 過去 30 日間のエスカレーション: 過去 30 日間にボットまたはユーザーが開始したエスカレーションの数。エスカレーションには、会話をサービス担当者、キュー、またはボットに転送する試行が含まれます。これは、通常、ボットが要求を処理できない場合やエラーが発生したときに行われます。ダイアログからの頻繁なエスカレーションは、ボットの設計または設定を改善する可能性があることを示します。
• 今日のエスカレーション: ボットまたはユーザーが開始したエスカレーション (転送試行) の数、およびエスカレーションのソースとなったダイアログの数。エスカレーションとは、(サービス担当者、キュー、ボットへの) 転送の試行のことです。エスカレーションは通常、エラーやボットがユーザー要求を処理できない場合に発生します。エスカレーション数が比較的多いダイアログは、ボットの設計または設定の改善が必要な可能性があります。
• 過去 30 日間の目標完了: 過去 30 日間のボット別の日別の目標完了数。
• 今日の完了した目標: ボットおよび時間別の完了した目標の数。
• 過去 30 日間のダイアログごとの完了した目標: 過去 30 日間のダイアログ名ごとおよびボットごとの完了した目標の件数。
• 今日のダイアログごとの完了した目標: 今日のダイアログ名ごとおよびボットごとの完了した目標の件数。
• 目標名ごとの完了した目標 (30 日間): 過去 30 日間の目標名ごとおよびボットごとの完了した目標の件数。
• 今日の目標名ごとの完了した目標: 今日の目標名ごとおよびボットごとの完了した目標の件数。
• 過去 30 日間のインテント認識数: 過去 30 日間のボットおよび日別のインテントモデルに対するインテント認識の試行数。
• 今日のインテント認識数: ボットおよび日別のインテントモデルに対するインテント認識の試行数。
• 過去 30 日間のインテント認識率: 過去 30 日間のボット別のインテントモデルに対する成功および失敗したインテント認識の試行数。
• 今日のインテント認識率: 今日のボット別のインテントモデルに対する成功および失敗したインテント認識の試行数。
• 一致および認識されたインテント (30 日): 過去 30 日間のインテントおよびボット別の成功した完全一致とインテント認識の集計数。
• 今日の一致および認識されたインテント: 今日のインテントおよびボット別の成功した完全一致およびインテント認識の集計数。
• Intents Recognized Last 30 Days (過去 30 日間に認識されたインテント数): 過去 30 日間のインテント別およびボット別の認識されたインテント数。
• Intents Recognized Today (今日認識されたインテント数): 今日のインテント別およびボット別の認識されたインテントの数。
• 過去 30 日間のダイアログによって終了したセッション: ボットまたは理由種別のあるユーザーによって終了したセッションの数。高い相対的件数は、ダイアログで会話が終了しない場合はボット設計に改善の余地があることを示します。
• 今日のダイアログによって終了したセッション: ボットまたは理由種別のあるユーザーによって終了したセッションの数。高い相対的件数は、ダイアログで会話が終了しない場合はボット設計に改善の余地があることを示します。
• 完了した目標があるセッション (30 日間): 過去 30 日間の目標名ごとおよびボットごとの 1 つ以上の完了した目標があるエンゲージされたセッションの件数。
• Sessions with Completed Goals Today (今日の完了した目標があるセッション数): 目標名別およびボット別の 1 つ以上の完了した目標があるエンゲージされたセッションの数。
• 過去 30 日間のダイアログ別のボットへの転送: 過去 30 日間に転送を開始したダイアログおよびボット別のボット間転送数。
• 今日のダイアログ別のボットへの転送: 今日転送を開始したダイアログおよびボット別のボット間転送数。
• Transfers Last 30 Days (過去 30 日間の転送数): 過去 30 日間のボット別のボットまたはサービス担当者への転送数。
• Transfers Today (今日の転送数): 今日のボット別のボットまたはサービス担当者への転送数。

Einstein ボットレポートにアクセスする手順は、次のとおりです。

ボットでレポートを絞り込むには、[ボットバージョン ID] 項目で検索条件を追加し、ボットバージョン ID を入力します。ボットバージョン ID は、ボットの特定のバージョンを表示するときにボットビルダーの URL で確認できます。また、レポートでも確認できます。

メモ ボットバージョンを削除すると、そのボットバージョンによって生成された集計総計値が削除されます。集計評価指標を復元するには、レポートから [ボットバージョン ID] 項目を削除します。

1 時間ごとの評価指標を使用するレポートでは 14 日間、日次の評価指標を使用するレポートでは 180 日間データが保持されます。データをもっと長く保存するには、メニュードロップダウンを使用して [エクスポート] をクリックします。