Knowledge/RAG品質データと総計値のデータ モデル
これらのDLO/DMOのデータを使用して、Knowledge取得イベントに関するインサイトを提供するレポート、ダッシュボード、クエリを作成します。
必要なエディション
| 使用可能なインターフェース: Lightning Experience |
| 使用可能なエディション: Enterprise Edition、Performance Edition、Unlimited Edition、および Developer Edition。必要なアドオンライセンスはエージェント種別によって異なります。 |
Knowledge/RAG 品質データおよび総計値データモデルについて
Knowledge/RAG品質データと総計値のデータ モデルは、品質データと総計値が含まれるDLO(データ レイク オブジェクト)とDMO(データ モデル オブジェクト)のコレクションです。
Knowledge/RAG品質データおよび評価指標ERD
| DLO/DMO | 説明 |
|---|---|
AIRetrieverRequest
|
取得者への要求を表します。 |
AIRetrieverResponse
|
取得者からの応答を表します。 |
AIRetrieverQualityMetric
|
要求と応答を比較して得られる品質スコアを表します。 |
データは Data 360 の DLO にストリーミングされ、該当する DMO にマッピングされます。
AIRetrieverRequest DLO
取得要求の詳細を取得する Data 360 DLO。AIRetrieverRequest オブジェクトには次の属性があります。
| 項目表示ラベル | 項目の API 参照名 | データ型 | 説明 |
|---|---|---|---|
AI Retriever Request Id
|
Id
|
テキスト | プライマリキー。AI 取得要求の一意の識別子。 |
Created By
|
CreatedById
|
テキスト → 参照 → ID (ルックアップ) | このレコードを作成したユーザー。 |
Created Date
|
CreatedDate
|
日付 - 時間 | このレコードが作成されたタイムスタンプ (日付/時間)。 |
External Record Id
|
ExternalRecordId
|
テキスト | 外部データソースシステムの対応するレコード ID。 |
External Source Id
|
ExternalSourceId
|
テキスト | 外部データソースシステムの ID。 |
Feature
|
FeatureText
|
テキスト | イベントの発生源に関与する機能の表示ラベル。ログで、取得者コールをトリガーした機能または追跡されている機能を特定します。例: DocumentRetrieval、KnowledgeSearch |
Last Modified By
|
LastModifiedById
|
テキスト → 参照 → ID (ルックアップ) | このレコードを最後に変更したユーザー。 |
Last Modified Date
|
LastModifiedDate
|
日付 - 時間 | ユーザーがこのレコードを最後に変更したときのタイムスタンプ (日付/時間)。 |
Query
|
QueryText
|
テキスト | 取得者に送信されるユーザークエリ。 |
Request Information
|
RequestInfoText
|
テキスト | 要求の追加情報 (JSON 形式のキーと値のペア)。 |
Request Timestamp
|
RequestTimestamp
|
日付 - 時間 | 取得要求が発生したときのタイムスタンプ (日付/時間)。 |
Retriever API Name
|
RetrieverApiName
|
テキスト | この要求に関連付けられた取得者の API 参照名 |
Retriever ReferenceId
|
RequestReferenceId
|
テキスト | 関連情報を取得する要求を取得者に送信した、コール元のコンポーネント、サービス、またはプロセスの参照 ID。例: agent、prompt、Apex クラス。 |
SessionId
|
SessionId
|
テキスト | 取得者をコールしたエージェントのセッション ID。 |
Source Additional Information
|
SourceAdditionalInfoTxt
|
テキスト | このコールを発信したソースアセットに関連付けられた追加情報 (JSON 形式のキーと値のペア)。例: PROMPT |
Source Asset API Name
|
SourceAssetApiName
|
テキスト | このコールを発信したソースアセットの API 参照名。例: PROMPT |
Source Asset Type
|
SourceAssetTypeName
|
テキスト | この通話を発信したソースアセットの種別。例: PROMPT |
Source Asset Version
|
SourceAssetVersion
|
テキスト | このコールを発信したソースアセットのバージョン。例: PROMPT |
SpanId
|
SpanId
|
テキスト | 範囲 ID は、取得者を直接コールしたコンポーネントから生成されます。 |
System Modified Stamp
|
SystemModstamp
|
日付 - 時間 | このレコードがユーザーまたは自動化プロセスによって最後に更新されたタイムスタンプ (日付/時間)。 |
TraceId
|
TraceId
|
テキスト | この取得者コールが発生したエージェントセッションのトレース ID。 |
AIRetrieverResponse DLO
取得者の応答の詳細を取得する Data 360 DLO。AIRetrieverResponse オブジェクトには次の属性があります。
| 項目表示ラベル | 項目の API 参照名 | データ型 | 説明 |
|---|---|---|---|
AI Retriever Response Id
|
Id
|
テキスト - 主キー | プライマリキー。AI 取得応答の一意の識別子。 |
AI Retriever Request
|
AiRetrieverRequestId
|
テキスト → 参照 → ID (親) | この取得応答に対応する AIRetrieverRequestId への外部キー参照。 |
Created By
|
CreatedById
|
テキスト → 参照 → ID (ルックアップ) | このレコードを作成したユーザー。 |
Created Date
|
CreatedDate
|
日付 - 時間 | このレコードが作成されたタイムスタンプ (日付/時間)。 |
External Record Id
|
ExternalRecordId
|
テキスト | 外部データソースシステムの対応するレコード ID。 |
External Source Id
|
ExternalSourceId
|
テキスト | 外部データソースシステムの ID。 |
Last Modified By
|
LastModifiedById
|
テキスト → 参照 → ID (ルックアップ) | このレコードを最後に変更したユーザー。 |
Last Modified Date
|
LastModifiedDate
|
日付 - 時間 | ユーザーがこのレコードを最後に変更したときのタイムスタンプ (日付/時間)。 |
Response Information
|
xResponseInfoText
|
テキスト | 応答の追加情報 (JSON 形式のキー/値ペア)。 |
Response Timestamp
|
ResponseTimestamp
|
日付 - 時間 | この応答が生成されたタイムスタンプ (日付/時間)。 |
Result
|
ResultText
|
テキスト | チャンク、SourceRecordId など、取得元応答の JSON 表現。 |
Sort Index
|
SortIndexNumber
|
数値 - 整数 | 取得者が返したチャンクの SortIndex。 |
Source Record
|
SourceRecordId
|
テキスト | チャンクにリンクされた文書参照。 |
System Modified Stamp
|
SystemModstamp
|
日付 - 時間 | このレコードがユーザーまたは自動化プロセスによって最後に更新されたタイムスタンプ (日付/時間)。 |
AIRetrieverQualityMetric DMO
取得者品質総計値の詳細を取得する Data 360 DMO。レポート、ダッシュボード、クエリの基礎として使用されます。AIRetrieverQualityMetric オブジェクトには次の属性があります。
| 項目表示ラベル | 項目の API 参照名 | データ型 | 説明 |
|---|---|---|---|
AI Retriever Quality Metric Id
|
Id
|
テキスト | プライマリキー。この指標結果に関連付けられた一意の識別子。 |
Agent Generated Response
|
AgentGeneratedResponseText
|
テキスト | AI 応答生成の ResponseText から抽出されたコンテキスト。 |
AI Gateway Request
|
CustomDMORef_AiGatewayRequestId
|
テキスト → 参照 → ID (ルックアップ) | この指標結果に関連付けられた GenAIGatewayRequestId への外部キー参照。 |
AI Gateway Request Id
|
AiGatewayRequestId
|
テキスト | この指標結果に関連付けられた GenAIGatewayRequestId への参照。 |
AI Response Generation
|
CustomDMORef_AiResponseGenerationId
|
テキスト | この指標結果に関連付けられた AIResponseGeneration (カスタム DMO GenAIGeneration) への外部キー参照。 |
AI Response Generation Id
|
AiResponseGenerationId
|
テキスト | この指標結果に関連付けられた AIResponseGeneration への参照。 |
AI Retriever Request
|
CustomDMORef_AiRetrieverRequestId
|
テキスト | この指標結果に関連付けられた AIRetrieverRequestId への外部キー参照 |
AI Retriever Request Id
|
AI Retriever Request Id
|
テキスト | この指標結果に関連付けられた AIRetrieverRequestId への参照。 |
Answer Relevancy Score
|
AnswerRelevancyScoreNumber
|
数値 - 小数 | 回答の関連性スコア。質問の回答の完全度と質は? |
Context Precision Score
|
ContextPrecisionScoreNumber
|
数値 - 小数 | コンテキスト精度スコア。見つかった正しいKnowledgeの割合は? |
Created By
|
CreatedById
|
テキスト → 参照 → ID (ルックアップ) | レコードを作成したユーザー。 |
Created Date
|
CreatedDate
|
日付 - 時間 | このレコードが作成されたタイムスタンプ (日付/時間)。 |
External Record Id
|
ExternalRecordId
|
テキスト | 外部データソースシステムの対応するレコード ID。 |
External Source Id
|
ExternalSourceId
|
テキスト | 外部データソースシステムの ID。 |
Faithfulness Relevancy Score
|
FaithfulnessRelevancyScoreNumber
|
数値 - 小数 | 忠実度関連性スコア。エージェントは見つかったKnowledgeをどの程度適切に使用しましたか? |
Last Modified By
|
LastModifiedById
|
テキスト → 参照 → ID (ルックアップ) | このレコードを最後に変更したユーザー。 |
Last Modified Date
|
LastModifiedDate
|
日付 - 時間 | ユーザーがこのレコードを最後に変更したときのタイムスタンプ (日付/時間)。 |
Last Processed Request Timestamp
|
LastProcessedReqTimestamp
|
日付 - 時間 | 指標評価のために最後に処理された AIRetrieverRequest のタイムスタンプ (日付/時間)。 |
Metric Created Timestamp
|
MetricCreatedTimestamp
|
日付 - 時間 | 指標結果が生成されたタイムスタンプ (日付/時間)。 |
Retrieved Context Id List
|
RetrievedContextIdListText
|
テキスト | 取得元応答の ResultText から抽出されたコンテキスト ID (Top-K) のリスト。レポートに使用されます。 |
Retriever Api Name
|
RetrieverApiName
|
テキスト | この要求に関連付けられた取得者の API 参照名。 |
Retriever Trace Id
|
RetrieverTraceId
|
テキスト | 取得要求中に生成された追跡 ID (OTel など)。 |
Retriever Trace Span Id
|
RetrieverTraceSpanId
|
テキスト | 取得要求中に生成された追跡範囲 ID (OTel など)。テレメトリトレース DMO への参照。 |
Source Document Id List
|
SourceDocumentIdListText
|
テキスト | 取得元応答のソースレコード ID のリスト。レポートに使用されます。 |
System Modified Stamp
|
SystemModstamp
|
日付 - 時間 | このレコードがユーザーまたは自動化プロセスによって最後に更新されたタイムスタンプ (日付/時間)。 |
UserUtterance
|
UserUtteranceText
|
テキスト | 取得要求のユーザーの発言から抽出されたコンテキスト。レポートに使用されます。 |
この記事で問題は解決されましたか?
ご意見をお待ちしております。
