EjemploClasificación de solicitudes de clientes
Cada solicitud, en su categoría. Y las dudosas, a una persona
Una proveedora recibe por escrito pedidos, cotizaciones, consultas por entregas, incidencias y consultas generales, todo mezclado. Este ejemplo las ordena en cinco categorías, aparta las que necesitan revisión y muestra dónde se equivoca.
Las solicitudes son sintéticas: las generó un guion, no las escribió ningún cliente. Los resultados valen para este archivo y no son una promesa para otro.
Leyendo el archivo y clasificando…
El archivo de solicitudes
Todo sale de un archivo, solicitudes-ejemplo.csv: una fila por solicitud, con la categoría que le corresponde. En un proyecto, las categorías y los ejemplos los revisa el cliente. Una parte se usa para ajustar el clasificador y el resto queda apartado para evaluarlo.
Primeras filas del archivo, tal como están (con sus errores de tipeo). Descargar solicitudes-ejemplo.csv (… KB).
La salida clasificada
Las … solicitudes apartadas, con la categoría que les asignó el clasificador y qué tan seguro quedó. Las que quedan por debajo del umbral de confianza no se dan por buenas: pasan a revisión.
Los casos que quedan para revisión humana
Una solicitud pasa a una persona si la confianza del clasificador es menor que el umbral, o si no trae ninguna palabra que el clasificador conozca. Mueva el umbral: cuanto más alto, más solicitudes revisa una persona y menos errores pasan sin revisar.
Por debajo de este valor, la solicitud va a revisión.
Algunas de las que van a revisión
Los errores, categoría por categoría
Medidos en las … solicitudes apartadas, que el clasificador no vio al ajustarse, y antes de la revisión humana.
Precisión: de las que el clasificador puso en esta categoría, cuántas lo eran. Encontradas: de las que eran de esta categoría, cuántas puso ahí.
Con qué se confunde cada una
Frente a dos formas sencillas de hacerlo
Para saber si el clasificador aporta algo, se compara con decir siempre la categoría más frecuente y con una lista de palabras clave escrita a mano.
Pruebe con una solicitud
Escriba una solicitud como la escribiría un cliente. Se clasifica en este navegador: no se envía ni se guarda.
Lo que este ejemplo no cubre
- Evalúa la clasificación sobre un archivo. No está conectado al correo, a WhatsApp ni a un CRM: eso es otro alcance.
- Una solicitud que mezcla dos temas recibe una sola categoría. En este archivo, … de las … apartadas mezclan dos.
- El clasificador cuenta palabras: no entiende el sentido. Una solicitud escrita con palabras que nunca vio queda con poca confianza y va a revisión.
- Trabaja en un idioma y con las cinco categorías de este archivo. Otra categoría u otro idioma necesitan ejemplos nuevos.
- La confianza es una cuenta del clasificador, no una garantía: también se equivoca con confianza alta, como se ve en la tabla.
Cómo se hizo: método, partición y cómo repetirloDetalle técnico para quien quiera revisarlo
Método
Clasificador Naive Bayes multinomial con suavizado de Laplace, escrito en JavaScript sin librerías. Cuenta cuántas veces aparece cada palabra en los ejemplos de cada categoría y, para una solicitud nueva, calcula qué categoría es más probable con esas cuentas. Se ajusta en su navegador al abrir la página, con las … filas de ajuste. No es un modelo de lenguaje y no llama a ningún servicio externo.
Vocabulario: … palabras (las que aparecen al menos dos veces en el ajuste, sin artículos, saludos ni cantidades: un número no dice si se pide, se cotiza o se reclama).
Partición
El archivo trae … solicitudes distintas: no hay dos con el mismo texto, así que ninguna del ajuste se repite en la evaluación. … son de ajuste y … de evaluación (columna «conjunto» del archivo).
Referencias
- Categoría más frecuente: decir siempre «…».
- Palabras clave: cuatro reglas escritas a mano, en orden (incidencia, entrega, cotización, pedido); si ninguna coincide, consulta general.
Cómo repetirlo
Las solicitudes las genera datos.js (en la carpeta de esta página) con la semilla …. Con la misma semilla salen siempre las mismas. …
Todos los números de esta página se calculan en su navegador al abrirla, a partir del archivo: ninguno está escrito a mano. El clasificador está en clasificador.js.
Una clasificación así, con tus solicitudes
DataGenesis organiza tus solicitudes en categorías y señala los casos que necesitan revisión. El piloto evalúa la clasificación sobre un archivo acordado; conectarlo al correo, a WhatsApp o a un CRM requiere otro alcance. No prometemos una precisión.
Piloto de clasificación de solicitudes · alcance publicado
Un idioma y hasta cinco categorías. Qué incluye, qué necesita de tu parte y qué se cotiza aparte está en la página del servicio.