Reveja as mensagens reais dos utilizadores na secção Classificação para as associar à intenção correta. Ao classificar as mensagens dos utilizadores, o modelo de IA do seu bot irá melhorar e ser enriquecido com frases autênticas dos utilizadores. A classificação também é utilizada para estimar a precisão do bot.
Visão geral
É necessária uma classificação regular para melhorar progressivamente a compreensão do seu chatbot. Para cada intenção, receberá um conjunto de frases extraídas de conversas reais com utilizadores para classificar.
As mensagens dos utilizadores selecionadas provêm de conversas reais. Mensagens irrelevantes, como conversas de teste (da plataforma), agendadores e respostas rápidas, são excluídas por predefinição. Os duplicados também são removidos para evitar classificar a mesma frase várias vezes.
Cada mensagem pode ser classificada de duas formas:
✅ Confirmar que a mensagem deve acionar a intenção selecionada.
❌ Rejeitar que a mensagem pertença à intenção selecionada. As mensagens rejeitadas serão enviadas para Mensagens indecisas para uma revisão final.
Depois de todas as mensagens apresentadas serem classificadas, pode aprovar a sessão de classificação. Será apresentado um novo conjunto de mensagens até que todas as mensagens da intenção selecionada sejam classificadas.
💭 A descrição e as sugestões da intenção ajudam a definir o âmbito da intenção com maior precisão. Ambas podem ser editadas no painel direito ou na página da intenção (aberta num novo separador ao clicar no ícone do lado direito).
Continue selecionando outra intenção no painel esquerdo e revendo todas as intenções disponíveis.
Mensagens indecisas
Se uma mensagem for classificada negativamente, será enviada diretamente para a secção Mensagens indecisas para escolher a intenção correta.
No topo da lista de intenções, verá as Mensagens indecisas, que reúnem todas as frases rejeitadas dos lotes de intenções. Um botão Ignorar tudo permite-lhe eliminar rapidamente todas as Mensagens indecisas caso não queira considerá-las.
💭 Uma mensagem ignorada uma vez não ficará «perdida» para sempre
Se a mesma mensagem for obtida novamente num novo lote de classificação, irá diretamente para a secção Indecisas.
Lote de classificação
A classificação funciona em lotes de mensagens: um lote é composto por 300 mensagens, selecionadas aleatoriamente entre todas as intenções do bot.
💭 Desbloquear a funcionalidade de classificação
Se um bot ainda não tiver processado 300 mensagens, são necessárias pelo menos 100 mensagens para criar o primeiro lote de classificação. As mensagens de teste (enviadas a partir da plataforma), os agendadores, as referências e os payloads de respostas rápidas são filtrados da seleção, uma vez que não são relevantes para a classificação. As mensagens classificadas provêm diretamente de conversas reais entre os utilizadores e o seu chatbot.
Para concluir um lote de classificação e receber um novo, é necessário classificar as mensagens de cada intenção e também as mensagens indecisas. Depois de toda a sessão ser aprovada, pode solicitar um novo lote de classificação.
💭 Treine o seu modelo NLU depois de concluir um lote
Alguns minutos depois de concluir um lote de classificação, receberá uma notificação para treinar novamente a Ação Inicial do Utilizador.
Cálculo da taxa de precisão
Quando um lote de mensagens é classificado:
80% das mensagens classificadas são automaticamente enviadas para as intenções apropriadas como frases de treino, para melhorar a compreensão do bot.
20% são enviadas para o conjunto de validação, que é utilizado para medir a precisão do bot
Por exemplo:
Classifica um lote de 1000 frases.
800 frases classificadas são utilizadas para treino.
200 frases são enviadas para o conjunto de validação para calcular a taxa de precisão.
A taxa de precisão é calculada da seguinte forma:
Selecione a mensagem classificada do conjunto de validação.
Avalie se a mensagem classificada foi corretamente atribuída à intenção pretendida.
Meça a percentagem de mensagens classificadas corretamente.
O conjunto de validação contém no máximo 1000 frases. Se ultrapassar este limite, as frases mais antigas serão removidas.