O Relatório de ROI da Markin para Equipas de Enterprise GrowthLer agora
MARKIN
Notas de campo
Atualizações de produtoLeitura de 6 min

Feed de Oportunidades, agora com proveniência de hipótese

Cada ação candidata no Feed de Oportunidades Markin agora carrega o sinal, o segmento e o experimento anterior de onde descende. Um clique para auditar ou entregar.

Jonas Weber
  • #Produto
  • #Feed de Oportunidades
  • #Governança
Opportunity Feed, now with hypothesis provenance

Cada ação candidata no Markin agora é entregue com a sua proveniência completa anexada. Qual sinal a identificou, qual segmento ela visa, de qual hipótese ela descende, qual experimento anterior moldou a anterior, e qual membro da equipa a tocou pela última vez. Um clique para auditar, um clique para entregar.

Esta é uma pequena mudança na interface e uma grande mudança na forma como as equipas de crescimento operam em relação ao Opportunity Feed. O resto desta nota explica o que lançámos, porquê e como usá-lo.

O que mudou

Cada cartão no Feed de Oportunidades agora expõe um painel de Proveniência. Ele mostra a cadeia causal que produziu a ação candidata, desde o sinal bruto na parte inferior até a variante entregue no topo. Cada nó é clicável. Cada nó preserva a versão do modelo, prompt ou regra que o produziu.

  1. Signal. O evento comportamental ou contextual que acionou a oportunidade, com carimbo de data/hora e tabela de origem.
  2. Oportunidade de receita. O segmento definido e o valor esperado, com a versão do modelo que o pontuou.
  3. Hypothesis. A declaração escrita, criada por um humano, com o seu autor, os seus antecedentes e os experimentos dos quais esses antecedentes são extraídos.
  4. Ação candidata. A variante específica proposta, com as suas salvaguardas, a sua versão de prompt e o seu plano de holdout.

Porque é que o lançámos

Duas modalidades de falha continuaram a aparecer nas avaliações dos clientes. A primeira: um líder de crescimento lança uma variante, ela ganha, e seis semanas depois ninguém consegue reconstruir por que o sistema a propôs em primeiro lugar. O vencedor não pode ser reutilizado porque sua linhagem foi perdida.

O segundo: uma variante regride e não há um rollback limpo. Alguém tem de raciocinar de trás para a frente através da stack para descobrir qual prompt, modelo ou regra precisa de ser revertido. Esse raciocínio leva horas. Cada uma dessas horas é confiança a vazar do sistema.

A Provenance fecha ambos. Os vencedores levam a sua linhagem para a próxima hipótese. Os perdedores podem ser revertidos no nó exato que produziu a regressão, com um clique.

Como usá-lo

Três lugares onde o painel rende o seu aluguer imediatamente.

A rever a fila diária

Abra o painel de Proveniência antes de aprovar. Se a hipótese parecer vaga ou os priors apontarem para um experimento obsoleto, devolva-o em vez de o enviar. A fila é a camada certa para impor a qualidade da hipótese.

Análises pós-morte dos vencedores

Uma análise semanal dos dez maiores vencedores com a sua proveniência expandida é a forma mais rápida de ver quais partes do modelo subjacente estão a agrupar. Se o mesmo antecedente continua a aparecer entre os vencedores, vale a pena reforçar. Se o mesmo autor continua a aparecer, promova o seu estilo de hipótese como um modelo.

Reversões sob pressão

Quando uma variante regride numa métrica guardada, o painel Provenance oferece agora um controlo de Reverter em cada nó. Reverter a solicitação, reverter a versão do modelo, reverter a regra ou reverter a ação completa. O sistema regenera candidatos a jusante automaticamente a partir do estado revertido.

O que é o próximo passo

Duas extensões estão em andamento. Primeiro, pacotes de auditoria exportáveis: um único arquivo por experimento para revisão financeira e legal, gerado sob demanda. Segundo, similaridade com reconhecimento de proveniência: quando um novo sinal é pontuado, o sistema exibirá a oportunidade histórica mais próxima por linhagem, não apenas por sobreposição de segmento.

Ambos são lançados este trimestre. Tudo o que foi mencionado está ativo hoje para todas as áreas de trabalho Markin. Para entender porque a proveniência importa num modelo operacional contínuo, consulte De calendários de campanha a decisioning contínuo.

Perguntas frequentes

Perguntas que os leitores fazem sobre isto.

Qual é a proveniência da hipótese no Markin Opportunity Feed?
A proveniência da hipótese é o rastro estruturado anexado a cada ação candidata, capturando o sinal original, o segmento de cliente, os experimentos anteriores dos quais ela descende e a versão do modelo que a gerou.
Porque é que a proveniência da hipótese é importante para o decisioning de receita?
A Provenance torna as ações candidatas auditáveis e reproduzíveis. Os revisores podem distinguir uma nova hipótese de uma reciclada, as retrospetivas podem questionar quais sinais produziram ações vencedoras, e a governação pode aplicar a política ao nível da fonte.
A proveniência muda a forma como os Experimentes são medidos?
Não. A medição ainda é feita com base num holdout preservado na própria base do operador. A proveniência altera a forma como as hypotheses são escolhidas, não como os resultados são lidos.

Ver no produto

Isto funciona em Markin hoje.

Os mesmos loops que esta nota descreve são executados 24 horas por dia, 7 dias por semana, na sua base de clientes. Veja o espaço de trabalho decidir, experimentar e executar 1:1.