Grupo holdout
También llamado: Control group
Un holdout es un conjunto de clientes seleccionados aleatoriamente y deliberadamente excluidos de una acción, mantenidos como el contrafactual. Un holdout global, excluido de toda actividad, mide la contribución incremental total de un programa de growth en lugar de la de cualquier campaña individual.
Por qué es importante para el ARPU
Sin un holdout, un programa reporta los ingresos que tocó, no los ingresos que creó. Cada Markin experimento incluye uno exactamente por esta razón.
Términos relacionados
IncrementalidadIncrementality es la parte de un resultado que no habría ocurrido sin la acción.A/B testUn A/B test asigna aleatoriamente a los clientes a dos o más variantes y compara una métrica predeclarada entre ellas.ExperimentoUn experimento es un lanzamiento controlado de una acción candidata frente a un holdout aleatorizado, dimensionado de antemano para que el resultado pueda distinguir un efecto real del ruido.Modelo de upliftUn uplift model estima el cambio en el resultado causado por tratar a un cliente, en lugar del resultado en sí.