O Relatório de ROI da Markin para Equipas de Enterprise GrowthLer agora
MARKIN
Notas de campo
Playbooksleitura de 12 min

Cross-sell sem canibalização: uplift, holdouts e guardrails

Como medir o uplift incremental, detetar a canibalização e definir guardrails baseados no lucro para programas de cross-sell que precisam defender o ARPU, e não apenas as taxas de resposta de campanha.

Marc Sanchez
  • #Cross-sell
  • #Uplift
  • #Incrementalidade
Cross-sell without cannibalization: uplift, holdouts and guardrails

cross-sell é o programa de receita mais solicitado e menos confiável em todas as grandes empresas B2C com as quais trabalhamos. O CFO pede isso a cada trimestre. A equipa de growth o envia a cada trimestre. Ninguém, de nenhum lado, acredita nos números. A razão quase nunca é o modelo. A razão é que o programa foi desenhado para se provar à equipa de growth, não ao CFO. Esta peça é o guia que gostaríamos de ter tido da primeira vez que tivemos que fazer essa defesa.

O problema central: uplift, não resposta

Uma campanha de cross-sell enviada para os seus melhores clientes sempre parecerá bem-sucedida. Esses clientes eram os mais propensos a comprar o segundo produto de qualquer forma. O número que o dashboard imprime, taxa de resposta, receita por envio, taxa de anexação, é quase pura linha de base. A contribuição incremental da campanha, o ARPU que ela realmente causou, é uma fração desse número e muitas vezes próxima de zero.

A solução não é um modelo melhor. É uma pergunta diferente. Pare de medir quem comprou. Comece a medir quem comprou por causa da intervenção. Isso é uplift, e uplift é a única métrica que sobrevive ao contacto com uma equipa financeira.

Quatro erros que vemos em todo o lado

1. Confundir resposta com lift

Uma taxa de resposta de oito por cento numa célula tratada não significa nada sem o controlo. Se a célula não tratada tivesse convertido a sete por cento, a campanha moveu a métrica em um ponto, não oito. Toda a leitura de cross-sell deve começar com a diferença, não com o valor bruto.

2. Ignorar o holdout nas vitórias "óbvias"

Os segmentos com melhor pontuação são aqueles onde a tentação de enviar para 100% é maior. Não o faça. Esses são precisamente os segmentos onde a linha de base é mais alta e o ganho incremental pode ser o menor. Se um segmento não merece um holdout, também não merece uma decisão de envio.

3. Ignorar a canibalização

Um cross-sell que impulsiona o produto B é uma vitória apenas se não deprimir o produto A mais do que impulsiona o B. Cada leitura de cross-sell precisa de uma visão de receita emparelhada em todo o portfólio de produtos, não apenas o SKU alvo. Metade dos programas de cross-sell que auditamos são líquidos-negativos assim que o termo de canibalização é adicionado.

4. Otimização em janelas curtas

Uma taxa de anexo de sete dias é um indicador principal, não um resultado. As decisões de cross-sell influenciam a retenção, as taxas de reembolso e os upgrades de segunda ordem em horizontes de trinta a noventa dias. Otimizar na janela de sete dias é como se entregam programas que parecem ótimos na segunda-feira e destroem a margem até ao final do mês.

A stack de uplift, de ponta a ponta

Um programa de cross-sell que sobreviverá a uma auditoria do CFO tem cinco componentes. Nenhum deles é opcional.

  1. Um modelo de elegibilidade. Predict, por cliente, a probabilidade de comprar o segundo produto sem intervenção. Esta é a sua linha de base.
  2. Um modelo de *uplift*. Predict, por cliente, a mudança nessa probabilidade se intervir. Isto é diferente e muitas vezes não correlacionado com o modelo de elegibilidade.
  3. Um holdout estável. Uma fração aleatória de cada segmento tratável que nunca recebe a intervenção, preservada para a janela de medição completa.
  4. Guardrails. Frequency caps entre produtos, regras de brand e rastreamento de receita emparelhado para que a canibalização seja visível na mesma vista que o lift.
  5. Uma leitura causal. Um número, a receita incremental por cliente tratado, calculada contra o holdout, durante o horizonte que é importante para as finanças.

A matemática de que realmente precisa

A transformação mais útil é ordenar os clientes não pela sua propensão para comprar, mas pelo seu uplift previsto. Em todas as grandes bases, isto produz quatro grupos.

  1. Persuadables. Não compraria sem a intervenção, comprará com ela. Enviar para eles.
  2. Coisas certas. Comprarão de qualquer forma. Não gaste a margem com eles; guarde a oferta para alguém que ela mova.
  3. Causas perdidas. Não comprarão sob qualquer intervenção. Ignorar.
  4. Não perturbar. Teria comprado, não comprará se você intervir. Este grupo existe em toda a base real e é a razão pela qual o cross-sell não qualificado muitas vezes perde dinheiro.

Um programa de cross-sell que ignora os dois últimos grupos queima margem duas vezes: uma nos "sure things" e outra nos "do not disturbs". Um programa que visa apenas os "persuadables" parece menor no papel e gera mais receita real.

Comprovando-o ao CFO

Uma leitura de cross-sell defensável tem três linhas e não mais. Receita incremental por cliente tratado, calculada contra o holdout. Contribuição líquida após margem e após qualquer produto "irmão" depreciado. O intervalo de confiança em ambos.

Se algum desses três não puder ser produzido, o programa não está pronto para ser apresentado como uma linha de receita. Está pronto para ser apresentado como um projeto de pesquisa. Essa distinção merece ser defendida; é a única coisa que fará com que o programa seja financiado no próximo ano.

Uma reconstrução de 60 dias

Para uma equipa que já executa cross-sell, mas não confia nos seus números, a migração é menor do que parece.

Semanas 1 a 2

Instrumente o holdout em cada envio de cross-sell existente. Não altere o targeting. Não altere o criativo. Apenas preserve dez por cento aleatórios que nunca recebem a intervenção. Isto é suficiente para calcular um primeiro número de lift honesto até o final do primeiro mês.

Semanas 3 a 6

Aplique um modelo de uplift na maior iniciativa existente. Lance um A/B test: célula classificada por propensão versus célula classificada por uplift, ambas com holdouts. Meça a diferença na receita incremental por cliente tratado, não na taxa de resposta.

Semanas 7 a 8

Apresentar a leitura às finanças no formato de três linhas. Eliminar os programas que resultam em saldo negativo após a inclusão da canibalização. Financiar as variantes 'apenas persuadíveis' dos vencedores.

A que isto se conecta

O cross-sell é um dos seis pilares no modelo operacional da Markin, e é o pilar onde a disciplina causal mais importa, porque a tentação de a ignorar é a mais alta. Para o contexto mais amplo sobre a operação contínua e causal, consulte De calendários de campanha a decisioning contínuo.

Perguntas frequentes

Perguntas que os leitores fazem sobre isto.

O que é canibalização num programa de cross-sell?
A canibalização ocorre quando uma oferta de cross-sell transfere receita de um produto existente para um novo sem criar gasto incremental. Ela aparece como resposta positiva no novo produto e uplift negativo no produto substituto para o segmento tratado.
Como medir o uplift incremental no cross-sell?
Ao reservar um holdout preservado no nível base, classificando os clientes pelo aumento previsto a partir de uma abordagem de dois modelos ou meta-aprendizagem, e comparando a receita tratada versus holdout no produto alvo e quaisquer substitutos plausíveis.
Que modelo é melhor para uplift num programa de cross-sell?
Não há um único melhor modelo. Meta-learners como T-learner, X-learner e R-learner funcionam todos com dados tabulares de clientes. O que importa mais do que a escolha do modelo é o design disciplinado do holdout e a avaliação com base no lucro incremental, em vez da taxa de resposta.
Quanto holdout é necessário para provar a incrementalidade?
Suficiente para detetar o menor aumento relevante para o negócio com poder razoável. Para a maioria dos programas de cross-sell B2C, isso representa 5 a 15 por cento da base elegível, preservada para toda a janela de medição.

Ver no produto

Isto funciona em Markin hoje.

Os mesmos loops que esta nota descreve são executados 24 horas por dia, 7 dias por semana, na sua base de clientes. Veja o espaço de trabalho decidir, experimentar e executar 1:1.