Usted estĆ” aquĆ:
ResoluciĆ³n de tareas
La resoluciĆ³n de tareas es una barrera de protecciĆ³n de agentes. EvalĆŗa cuĆ”n bien interpretan sus agentes la intenciĆ³n del usuario, como se expresa en una conversaciĆ³n concreta, y cuĆ”n bien resuelve la tarea.
Ediciones necesarias
| Disponible en: Este cambio se aplica a Lightning Experience en Enterprise Edition, Performance Edition, Unlimited Edition y Developer Edition con Foundation Edition o Agentforce 1. La configuraciĆ³n para agentes de IA estĆ” disponible en el sitio de escritorio. |
ResoluciĆ³n de tareas mide la eficacia con la que el agente comprende y resuelve la tarea del usuario en el transcurso de una conversaciĆ³n de mĆŗltiples turnos. La mediciĆ³n evalĆŗa si el asistente de IA entregĆ³ un resultado significativo que satisface la intenciĆ³n expresada por el usuario en la conversaciĆ³n.
Puntuaciones de resoluciĆ³n de tareas
La mediciĆ³n produce resultados estructurados no binarios para cada conversaciĆ³n. Las puntuaciones reflejan lo bien que el agente comprendiĆ³ y gestionĆ³ la tarea, completĆ³ el trabajo y abordĆ³ la consulta.
| PuntuaciĆ³n | DescripciĆ³n |
|---|---|
| Completamente resuelto | Indica que el agente se encargĆ³ de todas las partes de la tarea. |
| Resuelto parcialmente | Indica que el agente se encargĆ³ de algunas tareas, pero aĆŗn hay brechas. |
| Sin resolver | Indica que el agente no se encargĆ³ de las tareas ni abordĆ³ la consulta. |
Explicaciones para resultados que no estƔn completamente resueltos
AdemĆ”s, la resoluciĆ³n de tareas captura el razonamiento para cualquier resultado que no estĆ© Completamente resuelto. Este razonamiento explica por quĆ© la conversaciĆ³n no alcanzĆ³ la resoluciĆ³n completa.
Puntuaciones y explicaciones registradas en el seguimiento de auditorĆa de IA generativa
Los registros para las puntuaciones y explicaciones de ResoluciĆ³n de tareas estĆ”n en el seguimiento de auditorĆa de IA generativa en un objeto de modelo de datos (DMO) en Data 360. Utilice esta informaciĆ³n para ver lo bien que su agente estĆ” interpretando la intenciĆ³n del usuario y entregando lo que se solicita. Los datos tambiĆ©n pueden ayudarle a determinar si las instrucciones del tema necesitan mejoras o si se necesitan mĆ”s instrucciones. Consulte PrĆ”cticas recomendadas para redactar instrucciones de temas y solucionar problemas de agentes.
Supervisar y realizar un seguimiento de la resoluciĆ³n de tareas
Obtenga perspectivas de los datos recopilados para detectar tendencias, interpretar resultados y solucionar problemas de agentes.
- Build Your Own Data 360 paneles e informes. Para obtener mĆ”s informaciĆ³n, incluyendo permisos requeridos, consulte Paneles e informes de Data 360.
- Ejecutar consultas.
A continuaciĆ³n se describen atributos relevantes asociados con ResoluciĆ³n de tareas en el DMO Calidad de contenido de IA generativa de Einstein en el modelo de datos para auditorĆa y comentarios de IA generativa.
| Atributo | DescripciĆ³n | Ejemplo |
|---|---|---|
id |
Id. de evento exclusivo | |
parent |
Id. de generaciĆ³n (vĆnculos a la respuesta del agente) | |
detectorType |
Nombre de mediciĆ³n | TaskResolution |
category |
Resultado de evaluaciĆ³n | FULLY_RESOLVED, PARTIALLY_RESOLVED, UNRESOLVED |
value |
Texto de explicaciĆ³n | User intent was to...
|
orgId |
Id. de organizaciĆ³n de cliente | |
cloud |
Tipo de nube | einstein
|
timestamp |
Marca de tiempo de evento |
- Crear informes de Data 360 para supervisar la resoluciĆ³n de tareas
Cree informes de Data 360 para supervisar lo bien que los agentes realizan las tareas de un usuario hasta su finalizaciĆ³n en una sesiĆ³n.
