Knowledge/RAG 품질 데이터 및 메트릭에 대한 데이터 모델
이러한 DLO/DMO의 데이터를 사용하여 Knowledge 검색 이벤트에 대한 인사이트를 제공하는 보고서, 대시보드 및 쿼리를 작성합니다.
필수 Edition
| 지원 제품: Lightning Experience |
| 지원 제품: Enterprise, Performance, Unlimited및 Developer Edition 필수 추가 기능 라이센스는 에이전트 유형에 따라 다릅니다. |
Knowledge/RAG 품질 데이터 및 메트릭 데이터 모델에 대해
Knowledge/RAG 품질 데이터 및 메트릭에 대한 데이터 모델은 품질 데이터 및 메트릭을 포함하는 DLO(데이터 레이크 개체) 및 DMO(데이터 모델 개체)의 모음입니다.
Knowledge/RAG 품질 데이터 및 메트릭 ERD
| DLO/DMO | 설명 |
|---|---|
AIRetrieverRequest
|
검색자에 대한 요청을 나타냅니다. |
AIRetrieverResponse
|
검색기의 응답을 나타냅니다. |
AIRetrieverQualityMetric
|
요청과 응답을 비교하여 파생된 품질 점수를 나타냅니다. |
데이터는 Data 360의 DLO로 스트리밍된 다음, 해당 DMO에 매핑됩니다.
AIRetrieverRequest DLO
검색기 요청 세부 사항을 수집하는 Data 360 DLO입니다. AIRetrieverRequest 개체에는 다음과 같은 특성이 있습니다.
| 필드 레이블 | 필드 API 이름 | 데이터 유형 | 설명 |
|---|---|---|---|
AI Retriever Request Id
|
Id
|
텍스트 | 기본 키. AI 검색기 요청의 고유 식별자입니다. |
Created By
|
CreatedById
|
텍스트 - 참조 - ID(조회) | 이 레코드를 만든 사용자입니다. |
Created Date
|
CreatedDate
|
날짜 - 시간 | 이 레코드가 생성된 시간 스탬프(날짜/시간). |
External Record Id
|
ExternalRecordId
|
텍스트 | 외부 데이터 소스 시스템의 해당 레코드 ID입니다. |
External Source Id
|
ExternalSourceId
|
텍스트 | 외부 데이터 소스 시스템의 ID입니다. |
Feature
|
FeatureText
|
텍스트 | 이벤트 원본과 관련된 기능의 레이블입니다. 로그에서 검색기 호출을 트리거했거나 추적 중인 기능 또는 기능을 식별합니다. 예: DocumentRetrieval, KnowledgeSearch |
Last Modified By
|
LastModifiedById
|
텍스트 - 참조 - ID(조회) | 이 레코드를 가장 최근에 변경한 사용자입니다. |
Last Modified Date
|
LastModifiedDate
|
날짜 - 시간 | 사용자가 이 레코드를 가장 최근에 변경한 시간 스탬프(날짜/시간)입니다. |
Query
|
QueryText
|
텍스트 | 검색기에 전송된 사용자 쿼리입니다. |
Request Information
|
RequestInfoText
|
텍스트 | 요청의 추가 정보(JSON 형식의 키-값 쌍). |
Request Timestamp
|
RequestTimestamp
|
날짜 - 시간 | 검색기 요청이 발생한 시간 스탬프(날짜/시간). |
Retriever API Name
|
RetrieverApiName
|
텍스트 | 이 요청과 연결된 검색기의 API 이름 |
Retriever ReferenceId
|
RequestReferenceId
|
텍스트 | 관련 정보를 가져오기 위해 검색기에 요청을 보낸 호출 구성 요소, 서비스 또는 프로세스의 참조 ID입니다. 예: agent, prompt 또는 Apex 클래스 |
SessionId
|
SessionId
|
텍스트 | 검색기를 호출한 에이전트의 세션 ID입니다. |
Source Additional Information
|
SourceAdditionalInfoTxt
|
텍스트 | 이 호출을 시작한 소스 자산과 연결된 추가 정보입니다(JSON 형식의 키-값 쌍). 예: PROMPT |
Source Asset API Name
|
SourceAssetApiName
|
텍스트 | 이 호출을 시작한 소스 자산의 API 이름입니다. 예: PROMPT |
Source Asset Type
|
SourceAssetTypeName
|
텍스트 | 이 통화를 시작한 소스 자산의 유형입니다. 예: PROMPT |
Source Asset Version
|
SourceAssetVersion
|
텍스트 | 이 통화를 시작한 소스 자산의 버전입니다. 예: PROMPT |
SpanId
|
SpanId
|
텍스트 | 검색기를 직접 호출한 구성 요소에서 스탠 ID가 생성됩니다. |
System Modified Stamp
|
SystemModstamp
|
날짜 - 시간 | 사용자 또는 자동 프로세스에서 이 레코드를 마지막으로 수정한 시간 스탬프(날짜/시간)입니다. |
TraceId
|
TraceId
|
텍스트 | 이 검색기 호출이 발생한 에이전트 세션의 추적 ID입니다. |
AIRetrieverResponse DLO
검색기 응답 세부 사항을 수집하는 Data 360 DLO입니다. AIRetrieverResponse 개체에는 다음과 같은 특성이 있습니다.
| 필드 레이블 | 필드 API 이름 | 데이터 유형 | 설명 |
|---|---|---|---|
AI Retriever Response Id
|
Id
|
텍스트 - 기본 키 | 기본 키. AI 검색기 응답의 고유 식별자입니다. |
AI Retriever Request
|
AiRetrieverRequestId
|
텍스트 - 참조 - ID(상위) | 이 검색기 응답에 해당하는 AIRetrieverRequestId에 대한 외부 키 참조입니다. |
Created By
|
CreatedById
|
텍스트 - 참조 - ID(조회) | 이 레코드를 만든 사용자입니다. |
Created Date
|
CreatedDate
|
날짜 - 시간 | 이 레코드가 생성된 시간 스탬프(날짜/시간). |
External Record Id
|
ExternalRecordId
|
텍스트 | 외부 데이터 소스 시스템의 해당 레코드 ID입니다. |
External Source Id
|
ExternalSourceId
|
텍스트 | 외부 데이터 소스 시스템의 ID입니다. |
Last Modified By
|
LastModifiedById
|
텍스트 - 참조 - ID(조회) | 이 레코드를 가장 최근에 변경한 사용자입니다. |
Last Modified Date
|
LastModifiedDate
|
날짜 - 시간 | 사용자가 이 레코드를 가장 최근에 수정한 시간 스탬프(날짜/시간)입니다. |
Response Information
|
xResponseInfoText
|
텍스트 | 응답의 추가 정보(JSON 형식의 키/값 쌍). |
Response Timestamp
|
ResponseTimestamp
|
날짜 - 시간 | 이 응답이 발송된 시간 스탬프(날짜/시간)입니다. |
Result
|
ResultText
|
텍스트 | 청크, SourceRecordId 등 검색기 응답의 JSON 표현입니다. |
Sort Index
|
SortIndexNumber
|
숫자 - 정수 | 검색기가 반환한 청크의 SortIndex입니다. |
Source Record
|
SourceRecordId
|
텍스트 | 청크에 연결된 문서 참조. |
System Modified Stamp
|
SystemModstamp
|
날짜 - 시간 | 사용자 또는 자동 프로세스에서 이 레코드를 가장 최근에 수정한 시간 스탬프(날짜/시간)입니다. |
AIRetrieverQualityMetric DMO
검색기 품질 메트릭 세부 사항을 수집하는 Data 360 DMO입니다. 보고서, 대시보드 및 쿼리의 기준으로 사용됩니다. AIRetrieverQualityMetric 개체에는 다음과 같은 특성이 있습니다.
| 필드 레이블 | 필드 API 이름 | 데이터 유형 | 설명 |
|---|---|---|---|
AI Retriever Quality Metric Id
|
Id
|
텍스트 | 기본 키. 이 메트릭 결과와 연결된 고유 식별자입니다. |
Agent Generated Response
|
AgentGeneratedResponseText
|
텍스트 | AI 응답 생성의 ResponseText에서 추출된 컨텍스트입니다. |
AI Gateway Request
|
CustomDMORef_AiGatewayRequestId
|
텍스트 - 참조 - ID(조회) | 이 메트릭 결과와 연결된 GenAIGatewayRequestId에 대한 외부 키 참조입니다. |
AI Gateway Request Id
|
AiGatewayRequestId
|
텍스트 | 이 메트릭 결과와 연결된 GenAIGatewayRequestId를 참조합니다. |
AI Response Generation
|
CustomDMORef_AiResponseGenerationId
|
텍스트 | 이 메트릭 결과와 연결된 AIResponseGeneration(사용자 정의 DMO GenAIGeneration)에 대한 외부 키 참조입니다. |
AI Response Generation Id
|
AiResponseGenerationId
|
텍스트 | 이 메트릭 결과와 연결된 AIResponseGeneration의 참조입니다. |
AI Retriever Request
|
CustomDMORef_AiRetrieverRequestId
|
텍스트 | 이 메트릭 결과와 관련된 AIRetrieverRequestId에 대한 외부 키 참조 |
AI Retriever Request Id
|
AI Retriever Request Id
|
텍스트 | 이 메트릭 결과와 연결된 AIRetrieverRequestId의 참조입니다. |
Answer Relevancy Score
|
AnswerRelevancyScoreNumber
|
숫자 - 소수점 | 답변 관련도 점수. 질문에 대한 답변은 얼마나 완전하고 정확합니까? |
Context Precision Score
|
ContextPrecisionScoreNumber
|
숫자 - 소수점 | 컨텍스트 정밀도 점수. 올바른 Knowledge 발견된 비율은 얼마입니까? |
Created By
|
CreatedById
|
텍스트 - 참조 - ID(조회) | 레코드를 만든 사용자입니다. |
Created Date
|
CreatedDate
|
날짜 - 시간 | 이 레코드가 생성된 시간 스탬프(날짜/시간). |
External Record Id
|
ExternalRecordId
|
텍스트 | 외부 데이터 소스 시스템의 해당 레코드 ID입니다. |
External Source Id
|
ExternalSourceId
|
텍스트 | 외부 데이터 소스 시스템의 ID입니다. |
Faithfulness Relevancy Score
|
FaithfulnessRelevancyScoreNumber
|
숫자 - 소수점 | 충성도 관련성 점수. 에이전트가 찾은 Knowledge 얼마나 잘 사용했습니까? |
Last Modified By
|
LastModifiedById
|
텍스트 - 참조 - ID(조회) | 이 레코드를 가장 최근에 변경한 사용자입니다. |
Last Modified Date
|
LastModifiedDate
|
날짜 - 시간 | 사용자가 이 레코드를 가장 최근에 변경한 시간 스탬프(날짜/시간)입니다. |
Last Processed Request Timestamp
|
LastProcessedReqTimestamp
|
날짜 - 시간 | 메트릭 평가를 위해 마지막으로 처리된 AIRetrieverRequest의 타임스탬프(날짜/시간)입니다. |
Metric Created Timestamp
|
MetricCreatedTimestamp
|
날짜 - 시간 | 메트릭 결과가 생성된 시간 스탬프(날짜/시간). |
Retrieved Context Id List
|
RetrievedContextIdListText
|
텍스트 | 검색기 응답에서 ResultText에서 추출된 컨텍스트 ID(상위-K) 목록입니다. 보고에 사용됩니다. |
Retriever Api Name
|
RetrieverApiName
|
텍스트 | 이 요청과 연결된 검색기의 API 이름입니다. |
Retriever Trace Id
|
RetrieverTraceId
|
텍스트 | 검색기 요청 시 생성된 추적 ID(예: OTel)입니다. |
Retriever Trace Span Id
|
RetrieverTraceSpanId
|
텍스트 | 검색기 요청 시 생성된 검색 ID(예: OTel) 추적 Telemetry Trace DMO 참조. |
Source Document Id List
|
SourceDocumentIdListText
|
텍스트 | 검색기 응답의 소스 레코드 ID 목록입니다. 보고에 사용됩니다. |
System Modified Stamp
|
SystemModstamp
|
날짜 - 시간 | 사용자 또는 자동 프로세스에서 이 레코드를 마지막으로 수정한 시간 스탬프(날짜/시간)입니다. |
UserUtterance
|
UserUtteranceText
|
텍스트 | 검색기 요청의 사용자 발화에서 추출된 컨텍스트입니다. 보고에 사용됩니다. |
이 기사를 통해 문제를 해결했습니까?
개선을 위한 의견을 보내주세요.
