Prevención del churn vs predicción del churn: la diferencia que importa
La predicción estima quién se irá. La prevención decide qué hacer y demuestra que funcionó. Por qué un excelente modelo de churn puede coexistir con una curva de retención plana.
Jonas Weber·
#Baja de clientes (Churn)
#Predicción
#Toma de decisiones
Predicción de Churn estima quién es probable que se vaya. churn prevention decide qué hacer al respecto y demuestra que la acción cambió el resultado. La predicción responde a una pregunta sobre cómo es el mundo; la prevención es una intervención que lo cambia. Un negocio puede tener un excelente churn model y una retention curve plana, y ese es el caso normal, no la excepción.
La diferencia en una tabla
Predicción de Churn
churn prevention
Pregunta
Quién es probable que se vaya?
¿Qué deberíamos hacer, para quién y funcionó?
Salida
Una puntuación de riesgo por cliente
Una acción clasificada por cliente, más un holdout
Clase de modelo
Propensión (árboles potenciados por gradiente)
uplift (T-, X-, R-learner) más arbitraje
Métrica de éxito
AUC, precisión, recall, calibración
Margen incremental retenido frente al control
Propietario
Data science
Growth o lifecycle, con data science
Modo de fallo
Puntuaciones precisas en las que nadie actúa
Acción tomada sin un contrafactual
Por qué un buen modelo no reduce el churn
Un modelo de propensión clasifica a los clientes según la probabilidad de que se vayan. Esa clasificación no dice nada sobre la persuadibilidad. El decil de mayor riesgo suele contener un grupo grande de clientes que ya han decidido, cuyas mentes ninguna oferta cambiará, y un grupo más pequeño cuya decisión aún está abierta. Gastar el presupuesto de retención en el primer grupo es la forma más común de ejecutar un programa grande, ajetreado y no rentable.
El uplift modelling corrige el objetivo. En lugar de predecir la churn, predice el cambio en la churn causado por un tratamiento, lo que divide la base en persuadibles, seguros, causas perdidas y perros dormidos, siendo estos últimos clientes más propensos a irse por haber sido contactados. Los mecanismos se cubren en machine learning para churn prediction.
Cómo encajan
1Predecir Puntúa el riesgo en un horizonte fijo con funciones congeladas, para que nada del futuro se filtre al conjunto de entrenamiento.
2Attribute the cause Agrupa a los clientes en riesgo según el motivo por el que están en riesgo. La causa define qué tratamientos son siquiera elegibles.
3Rank actions by uplift Para cada tratamiento elegible, estima el efecto incremental y el coste, luego elige el que tenga el mayor margen retenido esperado.
4Hold back a control Entre el cinco y el quince por ciento de los clientes con puntuación igual no reciben nada, de forma permanente, por tratamiento.
5Read the result and act on it Escala lo que es incremental, elimina lo que es plano y alimenta los datos del experimento en el modelo de uplift.
Preguntas que separan a los dos en la práctica
1Can you name the action? Si la respuesta a un indicador de riesgo es un informe, solo tienes predicción.
2Is there an untreated group? Si cada cliente en riesgo recibe tratamiento, ninguna cifra de ahorro que reportes es defendible.
3Do you know your cost per save? La tasa de ahorro sin coste es vanidad. El margen incremental retenido es el número que el equipo de finanzas aceptará.
4How long from signal to action? Semanas de latencia convierten una buena predicción en un post-mortem.
¿Cuál deberías construir primero?
Construye el loop antes de construir el modelo. Un conjunto de reglas rudimentario (decaimiento del engagement más una degradación más una escalada de soporte) dirigido a dos tratamientos competidores con un holdout te enseñará más en seis semanas que un modelo con gradient-boosted bien ajustado sin distribución. Una vez que el loop funciona, la calidad del modelo comienza a ser compuesta, porque cada experimento produce los datos del efecto del tratamiento que los modelos de uplift necesitan y que los modelos de propensión nunca generan por sí solos.
¿Cuál es la diferencia entre prevención de churn y predicción de churn?
La predicción del churn estima la probabilidad de que un cliente se vaya dentro de un horizonte y genera una puntuación de riesgo. La prevención del churn selecciona y ofrece una intervención para ese cliente y mide el efecto incremental frente a un grupo de control. La predicción describe el mundo; la prevención lo cambia.
¿Puedes prevenir el churn sin un modelo de predicción?
Sí. Un conjunto de reglas creado a partir del deterioro del engagement, las desclasificaciones, los pagos fallidos y las escaladas de soporte identifica la mayor parte del riesgo accionable en una base típica. El modelo mejora la segmentación más tarde, pero el loop, los tratamientos y el holdout producen el valor.
¿Por qué un modelo preciso de churn no lo reduce?
Porque los clientes de mayor riesgo no son necesariamente los más persuadibles. Una gran parte de ellos ya ha decidido, por lo que tratarlos consume margen sin cambiar el resultado. Los modelos de uplift solucionan esto al predecir el efecto del tratamiento en lugar de la probabilidad de churn.
¿Quién posee la prevención del churn?
Data science es propietaria de los modelos y del diseño de los experimentos. Growth marketing o marketing de ciclo de vida son propietarios de los tratamientos, las reglas de elegibilidad y el presupuesto. El programa falla cuando una de las partes es la única propietaria, porque las puntuaciones sin acciones y las acciones sin contrafactuales no producen nada medible.
Los mismos bucles que describe esta nota funcionan 24/7 contra tu base de clientes. Observa cómo el espacio de trabajo decide, experimenta y ejecuta 1:1.