Vous êtes ici :
Compréhension des indicateurs de performance clés et des outils d'observabilité Agentforce
L'observabilité n'est pas un outil unique. Il s'agit d'une chaîne d'outils à plusieurs niveaux qui comprend une infrastructure qui capture l'activité des agents, des outils de développement pour tester le pré-déploiement de vos agents et des outils de surveillance qui exposent les tendances et les détails au niveau de la session après le déploiement.
Éditions requises
| Disponible avec : Lightning Experience |
| Disponible avec : Enterprise Edition, Performance Edition, Unlimited Edition et Developer Edition. Les licences complémentaires requises varient selon le type d'agent. |
Connaître la couche qui fait quoi permet à votre agent d'être observable de la création à la production. Cet article mappe la chaîne d'outils complète et chaque section pointe vers plus de détails.
Infrastructure
Avant qu'un outil d'observabilité puisse afficher ou traiter des données, ils doivent disposer de l'infrastructure télémétrique sous-jacente de l'agent. Activez ces outils pour permettre au reste de la chaîne d'utiliser des données.
| Outil | Où il apparaît | Description |
|---|---|---|
| Traçage de session Agentforce | Configuration → Agentforce → Traçage des sessions Agentforce | Capture chaque tour, étape de raisonnement, action et message pour chaque session d'agent. Cela doit être activé avant que tout autre outil d'observabilité ne contienne des données. |
| Traçage de la plate-forme de l'agent | Configuration → Recherche rapide → IA générative Einstein → Configuration d'Audit, Analytics et Surveillance Einstein → Commutateur Traçage de la plate-forme des agents | Capture la télémétrie au niveau du service à travers le moteur de raisonnement Atlas, Apex, Flux, Générateur de répliques, Actions invocables, Passerelle IA, Passerelle LLM et Fédérateur de requêtes DC. |
| Audit et commentaires | Configuration → Recherche rapide → Audit Einstein → Configuration d'Audit, Analytics et Surveillance Einstein | Capture les entrées/sorties LLM, les données de qualité de récupération, les évaluations Trust, les sorties de garde-fou et les signaux de commentaires des utilisateurs. Optimise les scores de qualité et Trust dans Agent Analytics. |
| Données et métriques de qualité Knowledge/RAG | Configuration → Recherche rapide → Audit Einstein → Configuration de l'audit, des analyses et de la surveillance Einstein → Données et métriques de qualité Knowledge/RAG | La qualité de récupération des scores, telle que Fidélité des réponses, Pertinence des réponses, Pertinence du contexte, est traitée via le pipeline Audit et commentaires. Pilote les métriques de récupération dans les scores de qualité. |
| Couche Trust | Configuration → Recherche rapide → Einstein → Einstein Trust Layer | Évalue l'adhérence aux instructions et la toxicité dérivées des sorties de la passerelle LLM, traitées via le pipeline Audit et commentaires. Pilote les métriques Trust dans Agent Analytics. |
Explorez chacun de ces outils dans Agentforce Observability Infrastructure.
Élaboration et test
Les outils Build & Test permettent d'observer le comportement des agents pendant le développement, avant l'existence d'un trafic de production.
| Outil | Où il apparaît | Description |
|---|---|---|
| Agentforce Builder | Agentforce Studio → Générateur | L'espace de travail principal pour le développement et les tests itératifs des agents. Exécutez des conversations en mode Simulation sans écrire de données, ou en mode Test live par rapport à des données réelles de bout en bout. |
| Résumé d’interaction | Agentforce Studio → Générateur → Panneau d'aperçu | Affiche la sélection de sous-agents, l'exécution d'actions et le raisonnement d'une conversation test. Explorez n'importe quel élément pour la planification étape par étape et les transitions de sous-agent. |
| Centre de test | Agentforce Studio → Centre de test Agentforce | Évaluation par lot de la récupération Knowledge, de la sélection des sous-agents et des actions, et de la résolution des tâches, avant le déploiement. Génère et calcule le score des énoncés dans une suite de tests en utilisant des scores par défaut, de qualité et personnalisés. Les scoreurs personnalisés exposent le post-déploiement dans Agent Analytics. |
Explorez chacun de ces outils dans Élaboration et test d'outils d'observabilité.
Observer
Une fois votre agent déployé, les outils de la phase Observer suivent les tendances à travers toutes les sessions. Vous pouvez ainsi examiner des conversations spécifiques et explorer les détails au niveau de l'étape.
| Outil | Où il apparaît | Description |
|---|---|---|
| Agent Analytics | Agentforce Studio → Observer et optimiser → Analytics | Agrége les données de performance à travers toutes les sessions et expose les tendances par domaine de résultat dans les tableaux de bord Tableau Next. Les onglets varient selon le type d'agent et couvrent l'efficacité, l'utilisation, la qualité, la santé, Trust et Voice. |
| Optimisation de l'agent | Agentforce Studio → Observer et optimiser → Optimisation | Vue de session individuelle avec un filtrage par intention, résultat et score de qualité. Les sessions traitées comprennent le clustering d'intentions et les scores de qualité. Les sessions non traitées sont immédiatement disponibles. |
| Résumé d’interaction | Agentforce Studio → Observer et optimiser → Détail de la session d'optimisation | Répartition structurée d'une intention sélectionnée montrant les sous-agents déclenchés, les actions déclenchées, le score de qualité et le raisonnement du score de qualité généré par le LLM. |
| Trace | Agentforce Studio → Observer et optimiser → Détail de la session d'optimisation | Enregistrement temporel de chaque étape de traitement avec un calendrier par étape et un texte d'erreur. Disponible immédiatement, y compris pour les sessions en cours de traitement. |
| Santé de l'agent | Agentforce Studio → Alertes | Créez des alertes et définissez des seuils pour être notifié lorsque l'activité des agents dépasse les niveaux acceptables. |
| Garde-fous de surveillance de l'agent | Agentforce Studio → Observer et optimiser | Vue dédiée pour les tendances d'adhésion aux instructions et de résolution des tâches, séparée de la vue Analytics plus large. |
| Surveillez votre agent activé pour Voice | Onglet Agentforce dans Superviseur Omni (console Service Cloud) | Vue en temps quasi réel par le superviseur des appels vocaux actifs avec des transcriptions live. |
| Éditeur de requête Data 360 | Data 360 → Requêtes | Accès SQL direct aux quatre couches de données sous-jacentes pour les agrégations personnalisées, les jointures inter-objets et l'analyse que l'interface utilisateur du produit n'expose pas. |
Explorez chacun de ces outils dans Outils d'observation de la phase.
La chaîne d'outils fonctionne mieux dans l'ordre. Commencez par Infrastructure pour vous assurer que les données circulent, utilisez Build & Test pour détecter les problèmes avant le déploiement, et utilisez Observe pour suivre les performances et enquêter après le déploiement.
