A medida que se agregan intenciones y expresiones adicionales y el modelo de IA se vuelve más avanzado, es esencial monitorear su rendimiento e identificar dónde se pueden hacer mejoras.
Ofrecemos diversas herramientas que se pueden usar para fortalecer el modelo de IA.
Entrenamiento optimizado
Esta es una guía paso a paso para optimizar el entrenamiento con nuestras herramientas basadas en IA. Este es un proceso iterativo que se puede llevar a cabo antes y después del lanzamiento.
Paso 1: Genere un nuevo modelo evaluado
- Vaya a IA > Modelos > + Nuevo modelo > marque “Ejecutar validación cruzada” > Entrenar agente IA.
- Esto puede tardar varias horas. El estado cambiará de En cola > Iniciado > Terminado, para que sepa cuando se complete la tarea.
- Le sugerimos ejecutarlo la noche anterior a la mañana en que desea hacer el entrenamiento.
Paso 2: Consulte la matriz de confusión
Vaya a Centro de entrenamiento > Matriz de confusión. Utilice “Matriz de confusión” y “Lista de problemas” para evaluar las intenciones que están “confundidas” o se superponen con otras.
Para las intenciones Media y Alta, vaya a Administrar expresiones para analizar las expresiones que causan confusión. Estas se resaltarán en amarillo.
Pregúntese:
- ¿Están bien definidas ambas intenciones? ¿Está claro el alcance de cada intención? Sugerencia: use la descripción de la intención para delimitar claramente el alcance de una intención.
- ¿Se superpone el tema de esta intención o su expresión con otra intención? Si hay superposición, ¿tiene sentido combinar las intenciones?
- ¿Tiene la intención suficientes expresiones para ser independiente? Nota: cuantas más expresiones tenga una intención, mayor será su peso en el modelo; por eso, si no se reconoce una intención cuando debería, puede deberse a una falta de datos de entrenamiento.
Paso 3: Entrene a partir del informe de impacto
- Genere un nuevo informe de impacto:
- Vaya a IA > Informe de impacto > + Nuevo informe.
- Seleccione “De mensajes existentes” si desea usar datos ya importados, o “De CRM” si desea importar datos adicionales.
- Especifique un marco de tiempo: según el periodo seleccionado y el volumen de mensajes, puede tardar entre 10 minutos y una hora.
- Establezca “Modelo benchmark” como “Modelo actual” > Crear.
- Use el nuevo informe de impacto para el entrenamiento y utilice los filtros para dirigirlo.
Después del paso 3, podría volver a ejecutar un modelo evaluado y verificar si la matriz de confusión mejoró.