Definizione del successo degli agenti
Agentforce mette in evidenza molti dati. Senza un'idea chiara di ciò che l'agente deve fare, i dati creano rumore anziché direzione. Definire il successo prima di iniziare a misurare è come sapere quali segnali sono importanti, quali ignorare e quando l'agente sta effettivamente migliorando.
Versioni (Edition) richieste
| Disponibile nelle versioni: Lightning Experience |
| Disponibile in: Enterprise Edition, Performance Edition, Unlimited Edition e Developer Edition. Le licenze aggiuntive richieste variano a seconda del tipo di agente. |
La maggior parte di questi KPI sono riportati nei cruscotti digitali di Analytics integrati di Agentforce. Gli articoli che seguono mostrano quali strumenti acquisiscono ogni segnale e quali potrebbero essere necessari per iniziare a monitorarlo. Per una mappa completa della toolchain, vedere Understand Agentforce Observability KPIs and Tools.
Abbiamo identificato tre aree di risultato che coprono un terreno comune nelle distribuzioni Agentforce. Questi risultati non sono rigidi o completi e gli agenti possono toccarne più di uno. Tuttavia, sapere dove si inserisce l'agente può essere utile per selezionare gli indicatori di prestazione chiave giusti, individuare gli strumenti giusti e leggere i risultati con sicurezza.
Agent Impact (ROI) (Impatto agente)
L'agente ha fatto progredire il business?
Agent Impact copre i risultati aziendali a valle, sia che l'agente gestisca le richieste in entrata, riduca i costi o generi un risultato aziendale. È probabile che l'agente rientri in quest'area se il suo lavoro principale rientra in aree come la riduzione dei casi, l'avanzamento delle opportunità in corso di realizzazione, l'aumento della conversione o la promozione del coinvolgimento nelle campagne. Nelle visualizzazioni prodotto, le metriche che riflettono più direttamente questi risultati vengono visualizzate in Efficacia e utilizzo.
Ad esempio, un team di assistenza clienti che si prefigge una deviazione del 70% gestisce 10.000 contatti al mese. Se la deviazione scende al 62%, ci sono 800 casi aggiuntivi che raggiungono un agente umano, un costo concreto su cui può agire il Vice Presidente dell'Assistenza.
I test convalidano i comportamenti degli agenti alla base di questi KPI: instradamento corretto, esecuzione delle azioni, qualità della risposta. Gli indicatori di prestazioni chiave (KPI) emergono in produzione, dove Analytics aggrega le sessioni utente reali in percentuali di deviazione, percentuali di abbandono e schemi di coinvolgimento da cui dipende la dichiarazione di successo.
| KPI | Cosa ti dice |
|---|---|
| Adozione / Abilitazione | Velocità con cui gli utenti interagiscono attivamente con l'agente. |
| Deviazione | Quota di contatti gestiti dall'agente senza inoltrare la richiesta a una persona. |
| Soluzione | Quota di sessioni in cui il problema sottostante dell'utente è stato completamente risolto. Misura se l'agente ha risolto il problema dell'utente, non se l'agente ha completato l'operazione assegnata. |
| Percentuale di abbandono | Quota di sessioni in cui l'utente è rimasto senza una risoluzione. |
| Tasso di coinvolgimento | Quota di sessioni in cui l'agente ha attivato almeno un'azione. |
| Conversione | Risultati aziendali raggiunti, ad esempio prenotazioni, completamenti dei carrelli, opportunità progredite o casi chiusi. |
| Avanzamento opportunità in corso di realizzazione | Opportunità create o avanzate tramite l'imbuto. |
| Coinvolgimento campagna | Risposte, click through o interazioni guidate dall'agente. |
| Return / Repeat Rate (Tasso di reso / ripetizione) | Quota di utenti che tornano dopo una sessione precedente. |
| CSAT / NPS | Soddisfazione del cliente a livello di sessione o di relazione. |
Efficacia e interazione degli agenti
E' stata una bella conversazione?
L'efficacia e l'interazione riguardano la qualità in sessione dal punto di vista dell'utente, ad esempio se l'agente ha capito ciò che è stato chiesto, ha risposto in modo preciso e ha reso l'interazione fluida. È probabile che l'agente rientri in questa area se la qualità delle singole interazioni è la principale misura del successo:
-
un assistente alle vendite in cui l'osservanza delle istruzioni e la precisione della risposta sono importanti
-
un agente rivolto al dipendente in cui la frequenza di re-prompt è un segnale di attrito
-
qualsiasi agente in cui il feedback degli utenti (CSAT, pollici su o giù, NPS) viene tracciato come risultato.
Nelle visualizzazioni prodotto, queste metriche sono visualizzate in Punteggi di efficacia e qualità.
Ad esempio, mentre un agente con il 92% di completamento dell'operazione e un'alta percentuale di re-prompt sta tecnicamente completando il suo lavoro, gli utenti devono chiedere la stessa cosa in diversi modi per arrivarci. Pertanto, Esperienza utente segnala un punto di attrito che la percentuale di completamento delle operazioni da sola non evidenzia.
I punteggi di qualità e l'osservanza delle istruzioni sono misurabili in un ambiente di test e possono essere monitorati in Testing Center e Agentforce Builder prima della distribuzione. Segnali come CSAT ed Esperienza utente emergono solo dalle sessioni utente live.
| KPI | Cosa ti dice |
|---|---|
| Efficacia | Quota di sessioni in cui l'agente ha completato l'operazione assegnata. Misura il comportamento degli agenti, non se il problema sottostante dell'utente è stato risolto. |
| Qualità | Precisione, sicurezza e pertinenza degli output dell'agente. |
| Aderenza alle istruzioni | La coerenza con cui l'agente ha seguito le istruzioni configurate durante la conversazione. |
| Tasso di coinvolgimento | Quota di sessioni in cui l'agente ha attivato almeno un'azione. |
| CSAT / NPS | Soddisfazione del cliente a livello di sessione o di relazione. |
Salute e sicurezza degli agenti
Il sistema è sano e funzionante entro i limiti?
Agent Health & Security copre lo stato operativo e tecnico dell'agente, sia che sia veloce, disponibile e rimanga entro i guardrail configurati. È probabile che l'agente rientri in questa area se tempo di attività, latenza o conformità sono requisiti espliciti:
-
una distribuzione regolamentata del settore in cui le violazioni dei guardrail devono essere monitorate
-
una distribuzione a volume elevato in cui la latenza influisce sull'esperienza utente su larga scala
-
qualsiasi agente per il quale la disponibilità è un problema contrattuale
Nelle visualizzazioni prodotto, queste metriche sono visualizzate in Health and Trust.
Ad esempio, un picco del tasso di inoltro al livello superiore alle 2 del mattino appare allarmante in Analytics giornaliero. Tuttavia, osservando la disponibilità su un lookback di 5 minuti, si è trattato di un guasto di 20 minuti, non di un cambiamento di comportamento prolungato. Senza questa area del risultato visualizzata, lo stesso segnale viene letto in modo errato e la correzione errata ha la priorità.
La latenza, l'osservanza delle istruzioni e le violazioni del guardrail sono rilevabili in un ambiente di test. La disponibilità e la percentuale di inoltro al livello superiore diventano significative solo su scala di produzione.
| KPI | Cosa ti dice |
|---|---|
| Prestazioni | Velocità di risposta dell'agente, misurata in base alla latenza del turno, alla latenza di recupero e alla produttività. |
| Disponibilità | Indica se l'agente è attivo e risponde senza errori o timeout. |
| Tasso di inoltro al livello superiore | Quota di sessioni trasferite a un agente umano o a un altro sistema. |
| Aderenza alle istruzioni | La coerenza con cui le risposte dell'agente hanno soddisfatto i requisiti di istruzione configurati. |
| Vincoli e guardrail | Indica se l'agente ha operato entro i limiti di conformità, privacy e contenuto definiti. |
La maggior parte degli agenti tocca più di un'area. Iniziare con l'area più direttamente collegata al motivo per cui l'agente è stato creato, quindi selezionare da due a quattro KPI da quell'area. Se l'agente copre chiaramente più aree, decidere quale lente è principale prima di distribuirla.
Si dovrebbe essere in grado di compilare una dichiarazione di esito positivo:
Ad esempio, per un agente dell'assistenza: "Questo agente ha successo quando le domande di fatturazione vengono risolte senza un trasferimento, misurato in base a un tasso di deviazione pari o superiore al 70% e CSAT pari o superiore al 4.0, per il team del servizio clienti che gestisce i referenti di fatturazione."
Oppure, per un agente di vendita: "Questo agente ha successo quando gli agenti di vendita ricevono consigli accurati sui prodotti alla prima richiesta, misurati in base all'osservanza delle istruzioni pari o superiore al 90% e alla percentuale di re-prompt inferiore al 15%, per il team di vendita aziendale."
Nella fase Osserva, la dichiarazione di successo è il benchmark con cui si confrontano i dati di produzione. Quando un KPI si allontana da questa definizione di successo, è il segnale per intraprendere azioni, iniziando dall'analisi della causa principale. Quando più KPI vanno alla deriva contemporaneamente, questa istruzione indica a quale priorità assegnare.
Se è possibile compilare tutte e tre le parti e indicare quale area del risultato ha più peso, si dispone di ciò che serve per andare avanti.
