Por qué falló tu último chatbot, y no fue el modelo
Casi todos los chatbots malos se medían por tasa de contención, una métrica que paga al bot por no pasar el cliente a una persona.
La métrica creó la experiencia
Casi todos los paneles de chatbot abren con la tasa de contención: la parte de conversaciones que terminó sin un humano.
Lee esa definición otra vez desde el lado del cliente. Todo traspaso cuenta como fallo. Toda negativa a traspasar cuenta como victoria. Un cliente que se rindió y cerró la ventana puntúa igual que un cliente al que se ayudó.
Un sistema optimizado contra ese número aprende a mantener a la gente dando vueltas entre preguntas reformuladas y artículos sugeridos. No es un desalineamiento sutil. Es el mecanismo preciso detrás de la experiencia que la gente describe cuando dice que odia los chatbots, y se diseñó a propósito, por quien eligió la métrica.
Otras tres cosas que probablemente eran ciertas
| Qué salió mal | Cómo lo veía el cliente | Con qué se arregla |
|---|---|---|
| Pedirle que responda a todo | Respuestas erróneas con seguridad en casos límite | Definiendo a qué puede responder |
| Sin acceso a tus sistemas | Parafraseando la página de preguntas frecuentes | Lectura de pedidos, stock, facturación, agenda |
| Nadie leía las transcripciones | El mismo fallo cada semana durante un año | Una persona, una hora, semanal |
La segunda fila determina en silencio todo lo demás. Una automatización conectada a nada solo puede repetir contenido publicado, así que compite con tu propio buscador y pierde, porque el cliente leyó esa página antes de abrir el chat.
Las preguntas que generan contactos son concretas y personales. Dónde está mi pedido. Esto sigue disponible. Por qué me habéis cobrado esto. Puedo cambiar mi cita. Responder a cualquiera necesita una vía de lectura hacia un sistema real, y construir esa vía es la mayor parte del trabajo.
Una propuesta que se la salta está presupuestando una envoltura alrededor de una base de conocimiento. La demo se verá excelente, porque las demos hacen preguntas generales.
Qué hace distinto una versión que funciona
Responde solo lo que puede verificar, y dice de dónde salió la respuesta.
En una implantación inmobiliaria, la automatización respondía lo que el propio anuncio podía responder: planta, superficie, precio, qué incluye, si el inmueble sigue disponible. Todo lo demás iba a un agente con nombre y con la conversación adjunta. El tiempo de respuesta pasó de 6 horas a 8 minutos, y funcionó porque la automatización nunca adivinaba.
Todo lo que obliga va a una persona por diseño. Precio fuera del publicado, condiciones, compromisos. Esa frontera es el tema de nuestras reglas para mantener a una persona en el circuito, y no pedimos disculpas por ella: una automatización que acepta algo en tu nombre a las dos de la madrugada es un pasivo, no una función.
El traspaso es el producto entero
Aquí fallan tres cosas y las tres son baratas de arreglar.
La salida de emergencia está escondida, así que el cliente adivina una frase mágica para llegar a una persona. Di en el primer mensaje que hay un humano disponible.
El traspaso llega como alerta escueta, así que el agente abre preguntando lo que el cliente ya ha explicado dos veces. Lleva la transcripción, o la automatización ha costado tiempo en vez de ahorrarlo.
La cola detrás del traspaso no está dimensionada para lo que el bot escala, así que una negativa rápida se convierte en un silencio largo. Es una decisión de capacidad, y hay que tomarla antes del lanzamiento en vez de descubrirla en la segunda semana.
Deriva a la primera señal de frustración, no a la tercera. El coste de un traspaso innecesario son unos minutos de un agente. El de uno denegado es el cliente.
Cuándo decimos que no lo construyas
En esta categoría más que en ninguna otra, y normalmente por una de tres razones.
Los contactos son en su mayoría cosas que un bot no puede verificar. El volumen es demasiado bajo para que alguien lo mantenga. O el problema real es que la respuesta humana es lenta, y la automatización sería decoración encima de eso.
El tercer caso merece nombrarse porque es común. Si las consultas esperan cuatro horas porque no hay nadie a las siete de la tarde, un bot simpático e inútil a las siete de la tarde no ha arreglado la espera, la ha automatizado. El dinero rinde más en enrutado, en cobertura, o en eliminar el motivo por el que te contactan.
Es la misma prueba que la quinta condición de preparación: si el cuello de botella no está aquí, acelerar esta parte no cambia nada que se pueda ingresar.
Qué preguntarle al siguiente proveedor
De qué sistemas va a leer, y qué hace cuando esa lectura falla.
Con qué se le mide, y si la respuesta es tasa de contención, qué le pasa al número cuando traspasa correctamente.
Cómo llega un cliente a una persona, en cuántos mensajes, y quién está esperando cuando llega.
Y pide ver una transcripción de una implantación real en un mal día. Cómo se ve una respuesta defendible a la primera pregunta está en el reparto entre reglas y modelo en el procesamiento de pedidos: preguntas deterministas respondidas por reglas, entrada no estructurada leída por un modelo, y los dos sin intercambiarse nunca.
01¿Qué tiene de malo medir la tasa de contención?+
Paga al sistema por hacer justo lo que los clientes odian. La tasa de contención cuenta conversaciones que terminaron sin un humano, así que todo traspaso se puntúa como fallo y toda negativa a traspasar se puntúa como victoria, con independencia de si el cliente consiguió aquello a lo que venía. Un bot optimizado contra ese número aprende a mantener a la gente girando entre preguntas reformuladas y artículos sugeridos, porque un cliente que se rinde y cierra la ventana cuenta igual que un cliente al que se ayudó. No es un desalineamiento sutil; es el mecanismo exacto detrás de la experiencia que describe casi todo el mundo cuando dice que odia los chatbots. Mide resolución y mide tiempo hasta el traspaso, y la misma tecnología produce una experiencia completamente distinta porque el incentivo pasa a apuntar hacia donde mira el cliente.
02Nuestro bot solo repetía la página de preguntas frecuentes. ¿Por qué?+
Porque no tenía acceso a los sistemas que guardan las respuestas, y eso es una decisión de alcance e integración, no una limitación del modelo. Una automatización de atención conectada a nada solo puede parafrasear contenido publicado, así que compite con tu propio buscador y pierde, porque el cliente normalmente ya ha leído esa página antes de abrir el chat. Las preguntas que de verdad generan contactos son concretas y personales: dónde está mi pedido, esto sigue disponible, por qué me habéis cobrado esto, puedo cambiar mi cita. Responder a cualquiera exige una vía de lectura hacia el sistema de pedidos, stock, facturación o agenda, y construir esa vía es la mayor parte del trabajo real. Cualquier propuesta que se la salte está presupuestando una envoltura alrededor de una base de conocimiento, y la demo se verá excelente porque las demos hacen preguntas generales.
03¿Cómo debería funcionar el traspaso a una persona?+
De inmediato, de forma visible y con la conversación entera adjunta en lugar de como un ticket nuevo. En la práctica fallan tres cosas y las tres tienen arreglo. La salida de emergencia está escondida, así que el cliente tiene que adivinar una frase mágica para llegar a una persona, lo que convierte una irritación leve en enfado. El traspaso llega como una alerta escueta, así que el agente abre con una pregunta que el cliente ya ha respondido dos veces y la automatización ha costado tiempo en vez de ahorrarlo. Y la cola detrás del traspaso no está dimensionada para el volumen que el bot escala, lo que convierte una negativa rápida en un silencio largo. Di en el primer mensaje que hay una persona disponible, deriva a la primera señal de frustración y no a la tercera, y lleva la transcripción contigo.
04¿Cuándo la respuesta honesta es no desplegar nada?+
Cuando los contactos que recibes son en su mayoría cosas que un bot no puede verificar, cuando el volumen es demasiado bajo para que alguien lo mantenga, o cuando el problema real es que tu respuesta humana es lenta y la automatización de atención sería una decoración encima de eso. El último caso es común y merece nombrarse: si las consultas esperan cuatro horas porque no hay nadie a las siete de la tarde, un bot que dice algo simpático e inútil a las siete de la tarde no ha arreglado nada, solo ha automatizado la espera. En esa situación el dinero rinde más en enrutado, en cobertura horaria, o en eliminar el motivo por el que la gente te contacta. Rechazamos automatización de atención por estos motivos más a menudo que en cualquier otra categoría de proyecto.
