Test delle previsioni di più intenti

Utilizzare i test in blocco per:

• Valuta fino a 1000 enunciazioni in una singola richiesta
• Confronto degli intenti previsti e previsti
• Esaminare i punteggi di confidenza per ogni previsione
• Analizzare le prestazioni complessive utilizzando le metriche di riepilogo

È possibile eseguire test in blocco in due modi:

• Test delle enunciazioni personalizzate: Fornire una serie di dati di enunciazioni e intenti previsti per valutare scenari specifici.
• Test con dati di bot esistenti: Valutare tutte le enunciazioni già configurate nel bot per generare un riepilogo completo delle prestazioni.

Questi due approcci corrispondono a endpoint API diversi.

Prima di iniziare, attivare Bot Einstein ed Einstein per Intents e creare il modello. Attivare l'autorizzazione pilota Batch Input Tester e attivare il modello di intenti multilingue (Intent V3) nella pagina Panoramica bot.

Nota Contattare l'Assistenza clienti Salesforce per attivare l'autorizzazione pilota Batch Input Tester. Se si disattiva il modello di intenti multilingue, Salesforce crea il modello utilizzando Intent Standard V2 (per le lingue singole) o Intent Multi-Language 2.5 (per più lingue).

Funzionamento dei test in blocco

I test in blocco valutano le enunciazioni rispetto al modello di intenti del bot e restituiscono:

• Si avvia una richiesta di valutazione con una serie di enunciazioni o una versione del bot selezionata.
• Il modello di intenti elabora ogni enunciazione e prevede l'intento più pertinente.
• Il sistema confronta l'intento previsto con l'intento previsto, se fornito.
• Il sistema assegna un punteggio di confidenza e una valutazione a ogni previsione.
• Il sistema genera un riepilogo delle previsioni con le metriche delle prestazioni complessive.
• Il sistema restituisce risultati consolidati per tutte le enunciazioni valutate.

Informazioni sui risultati delle previsioni

Per capire in che misura il bot classifica accuratamente le enunciazioni e per identificare le aree da migliorare, esaminare i risultati della previsione.

Risultati per enunciazione. Per ogni enunciazione, il sistema restituisce:

• Intento previsto: L'intento identificato dal modello
• Esito della previsione: Indica se l'intento previsto corrisponde all'intento previsto (passato, non riuscito o non elaborato)
• Punteggio di confidenza: Indica la probabilità che la previsione sia corretta

Metriche di riepilogo. Il sistema fornisce metriche aggregate per aiutare a valutare le prestazioni complessive:

• Percentuale di successo: Percentuale di enunciazioni previste correttamente
• Conteggio errori: Numero di enunciazioni previste in modo non corretto
• Percentuale di copertura dell'intento: Percentuale di intenti previsti correttamente per almeno un'enunciazione
• Conteggio errori: Numero di enunciazioni che il bot non è stato in grado di elaborare

Considerazioni

Tenere presenti queste considerazioni quando si utilizzano i test in blocco:

• È possibile valutare un massimo di 1000 enunciazioni alla volta.
• I risultati dipendono dalla qualità dei dati di addestramento degli intenti.
• Esaminare le previsioni non riuscite per migliorare la precisione degli intenti.
• Gli errori per le singole enunciazioni non arrestano la valutazione complessiva.

Per informazioni dettagliate sull'API, vedere Bot Utterance Intent Prediction Resources (Risorse per la previsione dell'intento enunciazione bot) nella Connect REST API Developer Guide.