Revisa los mensajes reales de los usuarios en la sección Etiquetado para asociarlos con la intención correcta. Al clasificar los mensajes de los usuarios, el modelo de IA de tu bot mejorará y se enriquecerá con expresiones auténticas de los usuarios. El etiquetado también se utiliza para estimar la precisión del bot.
Descripción general
Es necesario realizar un etiquetado periódico para mejorar progresivamente la comprensión de tu chatbot. Para cada intención, recibirás un lote de frases extraídas de conversaciones reales con usuarios para etiquetarlas.
Los mensajes de usuarios seleccionados provienen de conversaciones reales. Los mensajes irrelevantes, como las conversaciones de prueba (de la plataforma), los programadores y las respuestas rápidas, se excluyen de forma predeterminada. También se eliminan los duplicados para evitar etiquetar la misma frase varias veces.
Cada mensaje se puede etiquetar de dos maneras:
✅ Confirma que el mensaje debe activar la intención seleccionada.
❌ Rechaza que el mensaje pertenezca a la intención seleccionada. Los mensajes rechazados se enviarán a Mensajes sin decidir para una revisión final.
Una vez etiquetados todos los mensajes mostrados, puedes aprobar la sesión de etiquetado. Se mostrará un nuevo conjunto de mensajes hasta que se hayan etiquetado todos los mensajes de la intención seleccionada.
💭 La descripción y las sugerencias de la intención ayudan a definir con mayor precisión el alcance de la intención. Ambas se pueden editar desde el panel derecho o desde la página de la intención (que se abre en una nueva pestaña al hacer clic en el icono del lado derecho).
Continúa seleccionando otra intención en el panel izquierdo y revisando todas las intenciones disponibles.
Mensajes sin decidir
Si un mensaje se etiqueta negativamente, se envía directamente a la sección Mensajes sin decidir para seleccionar la intención correcta.
En la parte superior de la lista de intenciones, verás los mensajes sin decidir, que reúnen todas las frases rechazadas de los lotes de intenciones. Un botón de Ignorar todo te permite descartar rápidamente todos los mensajes sin decidir si no quieres tenerlos en cuenta.
💭 Un mensaje ignorado una vez no se «perderá» para siempre
Si el mismo mensaje se obtiene de nuevo en un lote de etiquetado nuevo, irá directamente a la sección Sin decidir.
Lote de etiquetado
El etiquetado funciona con lotes de mensajes: un lote consta de 300 mensajes seleccionados aleatoriamente entre todas las intenciones del bot.
💭 Desbloquear la función de etiquetado
Si un bot aún no ha gestionado 300 mensajes, se requiere un mínimo de 100 mensajes para crear el primer lote de etiquetado. Los mensajes de prueba (enviados desde la plataforma), los programadores, las referencias y las cargas útiles de las respuestas rápidas se filtran de la selección, ya que no son relevantes para el etiquetado. Los mensajes etiquetados provienen directamente de conversaciones reales entre los usuarios y tu chatbot.
Para completar un lote de etiquetado y recibir uno nuevo, debes etiquetar los mensajes de cada intención y también los mensajes sin decidir. Una vez aprobada toda la sesión, puedes solicitar un nuevo lote de etiquetado.
💭 Entrena tu modelo NLU después de completar un lote
Unos minutos después de completar un lote de etiquetado, recibirás una notificación para volver a entrenar Start User Action.
Cálculo de la tasa de precisión
Cuando se etiqueta un lote de mensajes:
El 80 % de los mensajes etiquetados se envía automáticamente a las intenciones correspondientes como frases de entrenamiento para mejorar la comprensión del bot.
El 20 % restante se incorpora al conjunto de validación, que se utiliza para medir la precisión del bot.
Por ejemplo:
Etiquetas un lote de 1000 frases.
800 frases etiquetadas se utilizan para el entrenamiento.
200 frases pasan al conjunto de validación para calcular la tasa de precisión.
La tasa de precisión se calcula de la siguiente manera:
Toma el mensaje etiquetado del conjunto de validación.
Evalúa si el mensaje etiquetado se ha clasificado correctamente según la intención prevista.
Mide el porcentaje de mensajes clasificados correctamente.
El conjunto de validación contiene un máximo de 1000 frases. Si superas este límite, se eliminarán las más antiguas.