Feed de Oportunidades, agora com proveniência de hipótese
Cada ação candidata no Feed de Oportunidades Markin agora carrega o sinal, o segmento e o experimento anterior de onde descende. Um clique para auditar ou entregar.
Jonas Weber·
#Produto
#Feed de Oportunidades
#Governança
Cada ação candidata no Markin agora é entregue com a sua proveniência completa anexada. Qual sinal a identificou, qual segmento ela visa, de qual hipótese ela descende, qual experimento anterior moldou a anterior, e qual membro da equipa a tocou pela última vez. Um clique para auditar, um clique para entregar.
Esta é uma pequena mudança na interface e uma grande mudança na forma como as equipas de crescimento operam em relação ao Opportunity Feed. O resto desta nota explica o que lançámos, porquê e como usá-lo.
O que mudou
Cada cartão no Feed de Oportunidades agora expõe um painel de Proveniência. Ele mostra a cadeia causal que produziu a ação candidata, desde o sinal bruto na parte inferior até a variante entregue no topo. Cada nó é clicável. Cada nó preserva a versão do modelo, prompt ou regra que o produziu.
Signal. O evento comportamental ou contextual que acionou a oportunidade, com carimbo de data/hora e tabela de origem.
Oportunidade de receita. O segmento definido e o valor esperado, com a versão do modelo que o pontuou.
Hypothesis. A declaração escrita, criada por um humano, com o seu autor, os seus antecedentes e os experimentos dos quais esses antecedentes são extraídos.
Ação candidata. A variante específica proposta, com as suas salvaguardas, a sua versão de prompt e o seu plano de holdout.
Porque é que o lançámos
Duas modalidades de falha continuaram a aparecer nas avaliações dos clientes. A primeira: um líder de crescimento lança uma variante, ela ganha, e seis semanas depois ninguém consegue reconstruir por que o sistema a propôs em primeiro lugar. O vencedor não pode ser reutilizado porque sua linhagem foi perdida.
O segundo: uma variante regride e não há um rollback limpo. Alguém tem de raciocinar de trás para a frente através da stack para descobrir qual prompt, modelo ou regra precisa de ser revertido. Esse raciocínio leva horas. Cada uma dessas horas é confiança a vazar do sistema.
A Provenance fecha ambos. Os vencedores levam a sua linhagem para a próxima hipótese. Os perdedores podem ser revertidos no nó exato que produziu a regressão, com um clique.
Como usá-lo
Três lugares onde o painel rende o seu aluguer imediatamente.
A rever a fila diária
Abra o painel de Proveniência antes de aprovar. Se a hipótese parecer vaga ou os priors apontarem para um experimento obsoleto, devolva-o em vez de o enviar. A fila é a camada certa para impor a qualidade da hipótese.
Análises pós-morte dos vencedores
Uma análise semanal dos dez maiores vencedores com a sua proveniência expandida é a forma mais rápida de ver quais partes do modelo subjacente estão a agrupar. Se o mesmo antecedente continua a aparecer entre os vencedores, vale a pena reforçar. Se o mesmo autor continua a aparecer, promova o seu estilo de hipótese como um modelo.
Reversões sob pressão
Quando uma variante regride numa métrica guardada, o painel Provenance oferece agora um controlo de Reverter em cada nó. Reverter a solicitação, reverter a versão do modelo, reverter a regra ou reverter a ação completa. O sistema regenera candidatos a jusante automaticamente a partir do estado revertido.
O que é o próximo passo
Duas extensões estão em andamento. Primeiro, pacotes de auditoria exportáveis: um único arquivo por experimento para revisão financeira e legal, gerado sob demanda. Segundo, similaridade com reconhecimento de proveniência: quando um novo sinal é pontuado, o sistema exibirá a oportunidade histórica mais próxima por linhagem, não apenas por sobreposição de segmento.
Ambos são lançados este trimestre. Tudo o que foi mencionado está ativo hoje para todas as áreas de trabalho Markin. Para entender porque a proveniência importa num modelo operacional contínuo, consulte De calendários de campanha a decisioning contínuo.
Perguntas frequentes
Perguntas que os leitores fazem sobre isto.
Qual é a proveniência da hipótese no Markin Opportunity Feed?
A proveniência da hipótese é o rastro estruturado anexado a cada ação candidata, capturando o sinal original, o segmento de cliente, os experimentos anteriores dos quais ela descende e a versão do modelo que a gerou.
Porque é que a proveniência da hipótese é importante para o decisioning de receita?
A Provenance torna as ações candidatas auditáveis e reproduzíveis. Os revisores podem distinguir uma nova hipótese de uma reciclada, as retrospetivas podem questionar quais sinais produziram ações vencedoras, e a governação pode aplicar a política ao nível da fonte.
A proveniência muda a forma como os Experimentes são medidos?
Não. A medição ainda é feita com base num holdout preservado na própria base do operador. A proveniência altera a forma como as hypotheses são escolhidas, não como os resultados são lidos.
Os mesmos loops que esta nota descreve são executados 24 horas por dia, 7 dias por semana, na sua base de clientes. Veja o espaço de trabalho decidir, experimentar e executar 1:1.