Probar múltiples predicciones de intención

Utilice pruebas masivas para:

• Evaluar hasta 1000 expresiones en una sola solicitud
• Comparar intenciones previstas y predichas
• Revisar puntuaciones de confianza para cada predicción
• Analizar el rendimiento general utilizando mediciones de resumen

Puede realizar pruebas masivas de dos formas:

• Probar expresiones personalizadas: Proporcione un conjunto de datos de expresiones e intenciones previstas para evaluar escenarios específicos.
• Prueba utilizando datos de bot existentes: Evalúe todas las expresiones ya configuradas en el bot para generar un resumen de rendimiento completo.

Estos dos enfoques corresponden a diferentes extremos de API.

Antes de empezar, active Bots de Einstein y Einstein para intenciones y cree su modelo. Active el permiso piloto Probador de entrada por lotes y active el modelo de intención multilingüe (Intención V3) en la página Descripción general de bot.

Nota Póngase en contacto con el Servicio de atención al cliente de Salesforce para activar el permiso piloto Probador de entrada por lotes. Si desactiva el modelo de intención multilingüe, Salesforce crea su modelo utilizando Estándar de intención V2 (para idiomas individuales) o Intención de varios idiomas 2.5 (para múltiples idiomas).

Cómo funcionan las pruebas masivas

Las pruebas masivas evalúan las expresiones con respecto al modelo de intención de su bot y devuelven:

• Inicia una solicitud de evaluación con un conjunto de expresiones o una versión de bot seleccionada.
• El modelo de intención procesa cada expresión y predice la intención más relevante.
• El sistema compara la intención predicha con la intención esperada, cuando se proporciona.
• El sistema asigna una puntuación de confianza y una valoración a cada predicción.
• El sistema genera un resumen de predicción con mediciones de rendimiento generales.
• El sistema devuelve resultados consolidados para todas las expresiones evaluadas.

Comprender resultados de predicción

Para comprender con qué precisión clasifica el bot las expresiones e identificar áreas de mejora, revise los resultados de la predicción.

Resultados por expresión. Para cada expresión, el sistema devuelve:

• Intención predicha: La intención identificada por el modelo
• Resultado de predicción: Indica si la intención predicha coincide con la intención esperada (aprobada, fallida o sin procesar)
• Puntuación de confianza: Indica cuán probable es que la predicción sea correcta

Mediciones de resumen. El sistema proporciona mediciones agregadas para ayudar a evaluar el rendimiento general:

• Índice de éxito: Porcentaje de expresiones predichas correctamente
• Recuento de fallos: Número de expresiones predichas incorrectamente
• Índice de cobertura de intención: Porcentaje de intenciones correctamente predichas para al menos una expresión
• Recuento de errores: Número de expresiones que el bot no pudo procesar

Consideraciones

Tenga en cuenta estas consideraciones cuando utilice pruebas masivas:

• Puede evaluar un máximo de 1000 expresiones a la vez.
• Los resultados dependen de la calidad de los datos de entrenamiento de intención.
• Revise predicciones fallidas para mejorar la precisión de la intención.
• Los errores para expresiones individuales no detienen la evaluación general.

Para obtener detalles de API, consulte Recursos de predicción de intención de expresión de bot en la Guía del desarrollador de API de REST de Connect.