Insights verkrijgen uit Knowledge / RAG-kwaliteitsgegevens en meetgegevens
Voor het analyseren van Knowledge / RAG-kwaliteitsgegevens en meetgegevens kunt u vooraf samengestelde dashboards en rapporten gebruiken, of u kunt Build Your Own. U kunt ook query's uitvoeren op de DMO's.
Vereiste editions
| Beschikbaar in: Lightning Experience |
| Beschikbaar in: Enterprise, Performance, Unlimited en Developer Edition. Vereiste uitbreidingslicenties variëren per type agent. |
| Benodigde gebruikersmachtigingen | |
|---|---|
| Rapporten en dashboards weergeven en openen | Data Cloud-gebruiker |
Zorg er voor toegang tot vooraf samengestelde rapporten en dashboards voor dat u Data Cloud User-machtigingen hebt. Zie Data Cloud-gebruikers maken en machtigingen toewijzen.
Agent Analytics gebruiken
Bewaak kwaliteitsscores in Agent Analytics.
Gebruik Agent Analytics om gegevens weer te geven voor Gemiddelde betrouwbaarheidsscore voor antwoord, Gemiddelde relevantiescore voor antwoord en Gemiddelde contextrelevantiescore. Zie Agent Analytics voor meer informatie.
Het ingebouwde dashboard gebruiken
Bewaak kwaliteitsscores in het ingebouwde dashboard voor Knowledge / RAG-kwaliteitsgegevens en -meetgegevens.
- Klik op Appstarter en geef Data Cloud op in het zoekveld.
- Als u het dashboard wilt zien, klikt u vanuit Data Cloud op Dashboards.
- Klik op Alle mappen onder MAPPEN.
- Klik in de kolom Mappen op een koppeling naar de map Knowledge / RAG Quality.
-
Selecteer het dashboard Knowledge / RAG-kwaliteitsgegevens en meetgegevens.
Dashboard voor Knowledge / RAG-kwaliteitsgegevens en -meetgegevens
De ingebouwde rapporten gebruiken
Bewaak kwaliteitsscores met behulp van de ingebouwde rapporten voor Knowledge / RAG-kwaliteitsgegevens en -meetgegevens. U kunt een rapport maken vanuit het dashboard of u kunt deze instructies volgen.
- Klik op Appstarter en geef Data Cloud op in het zoekveld.
- Klik voor het bekijken van rapporten vanuit Data Cloud op Rapporten.
- Klik op Alle mappen onder MAPPEN.
- Klik in de kolom Mappen op een koppeling naar de map Knowledge / RAG Quality.
-
Selecteer een rapport.
Rapporteren voor Knowledge / RAG-kwaliteitsgegevens en -meetgegevens
Voor het analyseren van Knowledge / RAG-kwaliteitsgegevens en -meetgegevens kunt u ook aangepaste rapporten samenstellen in Data 360 die relevante informatie ophalen uit de DMO's in het gegevensmodel voor Knowledge / RAG-kwaliteitsgegevens en -meetgegevens. Zie Data 360-rapporten en -dashboards voor meer informatie.
Een query uitvoeren op het gegevensmodel
U kunt ad-hocquery's uitvoeren op de DMO's in het gegevensmodel Knowledge / RAG-kwaliteitsgegevens en -meetgegevens.
Schrijf ad-hocquery's die relevante informatie ophalen uit de DMO's in het gegevensmodel voor Knowledge / RAG-kwaliteitsgegevens en -meetgegevens. Zie Query uitvoeren op gegevens in Data 360 voor meer informatie.
Hier is een voorbeeldquery:
SELECT "AgentGeneratedResponseText__c",
"AiGatewayRequestId__c",
"AiResponseGenerationId__c",
"AiRetrieverRequestId__c",
"AnswerRelevancyScoreNumber__c",
"ContextPrecisionScoreNumber__c",
"CreatedById__c",
"CreatedDate__c",
"DataSourceObject__c",
"DataSource__c",
"ExternalRecordId__c",
"ExternalSourceId__c",
"FaithfulnessRelevancyScoreNumber__c",
"InternalOrganization__c",
"KQ_id__c",
"LastModifiedById__c",
"LastModifiedDate__c",
"LastProcessedReqTimestamp__c",
"RetrievedContextIdListText__c",
"RetrieverApiName__c",
"RetrieverTraceId__c",
"RetrieverTraceSpanId__c",
"SourceDocumentIdListText__c",
"SystemModstamp__c",
"UserUtteranceText__c",
"cdp_sys_PartitionDate__c",
"cdp_sys_SourceVersion__c",
"id__c",
"metricCreatedTimestamp__c",
"orgId__c"
FROM "AiRetrieverQualityMetric__dll"
LIMIT 10Knowledge / RAG-kwaliteitsgegevens samenvoegen met Agentforce Sessietraceringsgegevens
Deze voorbeelden laten zien hoe u Knowledge / RAG-kwaliteitsgegevens samenvoegt met gegevens in het Session Tracing Data Model (STDM).
Voorbeeld met Queryeditor
SELECT * FROM "ssot__AiAgentInteraction__dlm"
INNER JOIN "ssot__AiRetrieverQualityMetric__dlm" ON "ssot__AiAgentInteraction__dlm"."ssot__attributetext__c" LIKE CONCAT('%',"ssot__AiRetrieverQualityMetric__dlm"."ssot__RetrieverTraceId__c",'%') AND "ssot__AiAgentInteractionType__c"='TURN'
INNER JOIN "ssot__AiAgentInteractionMessage__dlm" ON "ssot__AiAgentInteractionMessage__dlm"."ssot__AiAgentInteractionId__c" = "ssot__AiAgentInteraction__dlm"."ssot__Id__c" AND "ssot__AiAgentInteractionMessageType__c"='Input'
INNER JOIN "ssot__AiAgentSessionParticipant__dlm" ON "ssot__AiAgentSessionParticipant__dlm"."ssot__Id__c" = "ssot__AiAgentInteractionMessage__dlm"."ssot__AiAgentSessionParticipantId__c" AND "ssot__AiAgentSessionParticipantRole__c"='USER'
INNER JOIN "ssot__AiAgentInteractionStep__dlm" ON
"ssot__AiAgentInteractionStep__dlm"."ssot__AiAgentInteractionId__c"="ssot__AiAgentInteraction__dlm"."ssot__Id__c" AND "ssot__AiAgentInteractionStepType__c"='ACTION_STEP'Voorbeeld van het Data 360 Semantic Data Model (SDM)
SELECT * FROM "ssot__AiAgentInteraction__dlm"
JOIN "ssot__AiRetrieverQualityMetric__dlm" ON "ssot__TelemetryTraceId__c"="ssot__RetrieverTraceId__c"Data 360-rapporten samenstellen
Als u Knowledge / RAG-kwaliteitsgegevens en -meetgegevens wilt analyseren, stelt u rapporten samen in Data 360 die relevante informatie ophalen uit het DMO AiRetrieverQualityMetric. U kunt berekende insights gebruiken om meetgegevens te maken die waarschuwingen kunnen activeren. Zie Data 360-rapporten en -dashboards voor meer informatie.
