Recursos · 3 min de lectura
Cómo probar un chatbot antes de lanzarlo: el banco de escenarios
Una demo que salió bien no es evidencia. Evidencia es un banco de conversaciones difíciles que el agente pasa antes de cada cambio — y que crece con cada error real.
La demo no es evidencia
La demo sale bien porque la demo se eligió: seis preguntas razonables, catálogo fresco, nadie insistiendo. Producción es una clienta preguntando a las diez de la noche por un producto descontinuado, tres veces, con otra ortografía. La demo muestra lo que el agente hace bien; probar es ir a buscar lo que hace mal — antes de que lo encuentre un cliente.
Qué es un banco de escenarios
Una lista de conversaciones difíciles con resultado esperado: producto agotado, talla que no existe, precio que cambió ayer, cliente que pide descuento, tema vetado. Cada escenario define qué debe pasar — responder con el dato, preguntar para acotar, o escalar a una persona. El criterio no es “respondió bonito”: es pasó o no pasó, sin adjetivos.
Cuándo se corre: antes de cada cambio
Cambio de instrucciones, de catálogo o de modelo: el banco entero se corre de nuevo antes de que el cambio toque producción. El agente que ayer pasaba puede fallar hoy sin que nadie tocara “nada” — el modelo se actualizó por debajo, el catálogo se movió. Correr el banco convierte esa sorpresa en un resultado de prueba: falla en tu pantalla, no en el WhatsApp de una clienta.
El banco bueno se cosecha, no se escribe
El primero se escribe a mano: veinte o treinta escenarios sacados de cómo compra tu cliente. El bueno se cosecha después — cada conversación real que salió mal se convierte en un escenario nuevo, y ese error ya no puede volver sin sonar una alarma. A los tres meses, el banco es la memoria de todo lo que el agente ya no tiene permitido olvidar.
El resultado esperado lo define el negocio
Qué debe pasar cuando piden descuento no lo decide quien programó el agente: lo decide quien pone la plata. Escribir los escenarios obliga a esa conversación — y el documento que sale vale tanto como el sistema. Y si estás evaluando proveedores, pedí una sola cosa: el banco de escenarios y su última corrida. Si no existen, estás comprando una demo.
¿Preferís que lo revisemos sobre tu caso?
Una auditoría de 15 minutos sobre tu operación real. Salís con una lectura honesta de qué automatizar primero, y qué no.
Agendá una auditoría de 15 min