Probar múltiples predicciones de intención

Utilice pruebas masivas para:

• Evaluar hasta 1000 expresiones en una sola solicitud
• Comparar intenciones previstas y predichas
• Revisar puntuajes de confianza para cada predicción
• Analizar el desempeño general utilizando mediciones de resumen

Puede realizar pruebas masivas de dos formas:

• Probar expresiones personalizadas: Proporcione un conjunto de datos de expresiones e intenciones previstas para evaluar escenarios específicos.
• Pruebe utilizando datos de bot existentes: Evalúe todas las expresiones ya configuradas en el bot para generar un resumen de desempeño completo.

Estos dos enfoques corresponden a diferentes extremos de API.

Antes de empezar, active Bots Einstein y Einstein for Intents y cree su modelo. Active el permiso piloto Probador de entrada por lotes y active el modelo de intención entre idiomas (Intención V3) en la página Descripción general de bot.

Nota Haga contacto con el Servicio de atención al cliente de Salesforce para activar el permiso piloto Probador de entradas por lotes. Si desactiva el modelo de intención entre idiomas, Salesforce crea su modelo utilizando Estándar de intención V2 (para idiomas individuales) o Intención en varios idiomas 2.5 (para idiomas múltiples).

Cómo funcionan las pruebas masivas

Las pruebas masivas evalúan las expresiones con respecto al modelo de intención de su bot y devuelven:

• Inicia una solicitud de evaluación con un conjunto de expresiones o una versión de bot seleccionada.
• El modelo de intención procesa cada expresión y predice la intención más relevante.
• El sistema compara la intención predicha con la intención esperada, cuando se proporciona.
• El sistema asigna un puntuaje de confianza a cada predicción.
• El sistema genera un resumen de predicción con mediciones de desempeño generales.
• El sistema devuelve resultados consolidados para todas las expresiones evaluadas.

Comprender resultados de predicción

Para comprender con qué precisión clasifica el bot las expresiones e identificar áreas de mejora, revise los resultados de la predicción.

Resultados por expresión. Para cada expresión, el sistema devuelve:

• Intención predicha: La intención identificada por el modelo
• Resultado de predicción: Indica si la intención predicha coincide con la intención esperada (aprobada, fallida o sin procesar)
• Puntuaje de confianza: Indica la probabilidad de que la predicción sea correcta

Mediciones de resumen. El sistema proporciona mediciones agregadas para ayudar a evaluar el desempeño general:

• Índice de éxito: Porcentaje de expresiones predichas correctamente
• Conteo de fallos: Número de expresiones predichas incorrectamente
• Índice de cobertura de intención: Porcentaje de intenciones correctamente predichas para al menos una expresión
• Conteo de errores: Número de expresiones que el bot no pudo procesar

Consideraciones

Tenga en cuenta estas consideraciones cuando utilice pruebas masivas:

• Puede evaluar un máximo de 1000 expresiones a la vez.
• Los resultados dependen de la calidad de los datos de entrenamiento de intención.
• Revise predicciones con fallos para mejorar la precisión de la intención.
• Los errores para expresiones individuales no detienen la evaluación general.

Para obtener detalles de API, consulte Recursos de predicción de intención de expresión de bot en la Guía del desarrollador de API de REST de Connect.