Holdout group
Auch genannt: Control group
Ein holdout ist eine zufällig ausgewählte Gruppe von Kunden, die bewusst von einer Aktion ausgeschlossen wird und als Kontrafaktum dient. Ein globaler holdout, der von allen Aktivitäten ausgeschlossen ist, misst den gesamten incrementality Beitrag eines growth Programmes und nicht den einer einzelnen Kampagne.
Warum es für ARPU wichtig ist
Ohne einen holdout meldet ein Programm den Umsatz, den es berührt hat, nicht den Umsatz, den es geschaffen hat. Jedes Markin Experiment enthält aus genau diesem Grund einen holdout.
Verwandte Begriffe
InkrementalitätIncrementality ist der Anteil eines Ergebnisses, der ohne die Aktion nicht eingetreten wäre.A/B testEin A/B test weist Kunden zufällig zwei oder mehr Varianten zu und vergleicht eine vorher deklarierte Metrik zwischen ihnen.ExperimentEin Experiment ist die kontrollierte Freigabe einer Kandidatenaktion gegen einen randomisierten holdout, der im Voraus so dimensioniert wurde, dass das Ergebnis einen realen Effekt von Rauschen unterscheiden kann.Uplift ModellEin uplift model schätzt die Veränderung des Outcomes, die durch die Behandlung eines Kunden verursacht wird, anstatt des Outcomes selbst.