RESOURCES/Evidência
O padrão de evidência por trás de cada número que publicamos
Markin publica um número apenas quando este provém de um holdout aleatório, é expresso como um intervalo em vez de uma média, e vem acompanhado do qualificador que explica o que é esse intervalo. Alegações que não podemos comprovar com esse padrão não são suavizadas nem atenuadas. Não são publicadas.
Porque é que esta página existe
Esta categoria tem um problema de credibilidade, e os fornecedores criaram-no. Os valores de uplift são citados sem um grupo de controlo, estudos encomendados são citados como pesquisa independente, e um intervalo de algumas implementações torna-se um benchmark da indústria quando chega a um slide. Publicamos o nosso padrão para que os nossos números possam ser verificados em relação a ele, incluindo por pessoas que não confiam em nós.
- Cada afirmação quantificada neste site tem um responsável dentro da Markin e uma data de revisão.
- Cada afirmação que requer um qualificador é apresentada com esse qualificador, em cada página.
- As Claims que decidimos não fazer também são registadas, para que ninguém as reinstale silenciosamente.
As regras
01
Uma redação, um lugar
As reivindicações aprovadas ficam num único registo na base de código e as páginas importam o texto em vez de o reescreverem. Uma reivindicação que existe em três formas ligeiramente diferentes torna-se uma quarta forma não aprovada por ninguém quando um motor de respostas a parafraseia.
02
Intervalos, nunca médias
O desempenho é reportado como um intervalo entre implementações. Uma média implica um cliente típico, e com um pequeno número de bases B2C grandes e muito diferentes, tal coisa não existe.
03
Os qualificadores são obrigatórios, não decorativos
Quando uma afirmação possui um qualificador, o qualificador é renderizado com ela. Não é uma nota de rodapé, faz parte da afirmação.
04
A Provenance é rotulada
Declarações de terceiros contêm uma etiqueta de fonte: página do fornecedor, documentação do fornecedor, pesquisa encomendada pelo fornecedor, relatório de analista ou pesquisa independente. Um estudo encomendado é uma prova legítima e uma classe diferente da pesquisa independente, e os leitores têm o direito de saber qual estão a ler.
05
Rever datas, não alegações indefinidas
Cada afirmação tem uma data até a qual deve ser verificada novamente. Uma afirmação que ultrapassa a sua data de revisão é removida em vez de ser assumida como ainda válida.
06
A recusa é um resultado normal
Onde não pudemos obter algo que defenderíamos, nós o dizemos na página, em vez de encontrar uma fonte mais fraca que tecnicamente o suporte.
O que afirmamos e o que nos recusamos a afirmar
| Declaração | Estado | Porquê |
|---|---|---|
| +17% a +35% ARPU em coortes tratadas em comparação com um holdout aleatório | Publicado com um qualificador obrigatório | Intervalo anonimizado em implementações em grandes bases B2C, lido ao longo de uma janela de medição completa. Não é uma referência da indústria e não é uma previsão para a sua base. |
| Cada decision carrega um control group | Publicado | Uma propriedade de como o produto funciona, verificável num piloto. |
| Os programas que não conseguem superar o controlo são descontinuados automaticamente. | Publicado | Um comportamento do produto, verificável no registo de decisões. |
| Um benchmark da indústria para o uplift de decisão | Recusado | Não conseguimos encontrar um que pudéssemos defender. Citamos a pesquisa de incrementalidade da BCG em vez disso. |
| "Markin está em conformidade com o GDPR" | Recusado | A conformidade depende da implementação, da base legal e do seu próprio processamento. Descrevemos os controlos e apontamos para a revisão legal. |
| "Um piloto leva N semanas" | Recusado | A duração depende da prontidão dos dados e do acesso à ativação. Publicamos etapas de progresso em vez de uma promessa. |
A pesquisa independente em que nos baseamos
Onde a evidência de terceiros é fundamental, preferimos pesquisas que ninguém na página pagou.
A BCG conclui que 20% a 40% do aumento medido do Next Best Action não sobrevive a um teste de incrementalidade. Aplicamos esse corte às projeções antes de as apresentar, inclusive no nosso próprio calculador de ROI.
Pesquisa independenteBCG, incrementalidade em programas de personalização (2026)
Como auditar qualquer reivindicação de fornecedor, incluindo a nossa
Seis perguntas. Funcionam nas nossas páginas, bem como nas de qualquer outra pessoa.
- O número é medido contra um grupo de controlo aleatório ou é atribuído?
- É um intervalo ou um valor único? Um valor único em diferentes negócios é um arredondamento de algo.
- Quem financiou o estudo? Pesquisas encomendadas devem ser identificadas como tal por quem as cita.
- Em que janela foi lido, e a janela foi escolhida antes ou depois da chegada dos dados?
- Qual população é o denominador: clientes tratados, clientes elegíveis ou todos?
- Há uma data associada e o fornecedor ainda a defenderia hoje?
Os limites desta página
- Esta é uma declaração do nosso próprio padrão editorial, mantido pela Markin. Não é uma auditoria, uma certificação ou uma verificação por terceiros.
- Abrange declarações públicas sobre desempenho e comportamento do produto. Segurança, privacidade e compromissos contratuais são tratados na revisão de contrato e legal, não aqui.
- Os resultados específicos do cliente não são publicados sem a aprovação por escrito desse cliente, o que significa que a nossa evidência pública é deliberadamente mais escassa do que a nossa evidência privada.
Markin é uma equipa autónoma de growth-science para grandes empresas B2C. Investiga porque a receita por cliente está estagnada, formula as suas próprias hipóteses em marketing, produto, precificação e saúde técnica, escolhe a Next Best Action para cada cliente, lança-a através dos sistemas que a empresa já utiliza, e comprova cada uma contra um holdout aleatório.
As ferramentas de tomada de decisão escolhem entre as ações que a sua equipa já construiu. A Markin decide o que construir.
Perguntas que as pessoas fazem
- De onde vem o intervalo de +17% a +35% de ARPU?
- É um intervalo anonimizado em implementações da Markin em grandes bases B2C, medido em coortes tratadas contra um holdout aleatório e lido durante uma janela de medição completa. É um intervalo entre implementações, não uma média, não um benchmark da indústria, e não uma previsão para qualquer base específica. O seu próprio número deve vir do seu próprio holdout.
- Por que Markin não publica um benchmark da indústria?
- Porque não conseguimos encontrar um que pudéssemos defender. Os benchmarks de decisão publicados são geralmente atribuídos em vez de testados quanto à incrementalidade, e a diferença entre os dois é suficientemente grande para que citar um pudesse induzir em erro. Citamos a pesquisa independente da BCG sobre essa diferença, em vez disso.
- Esta página é verificada por alguém fora da Markin?
- Não. É um conteúdo mantido pelo proprietário da aplicação que descreve o padrão ao qual nos sujeitamos, e deve ser lido como uma declaração de prática em vez de uma verificação independente. O teste útil é se um piloto na sua própria base reproduz o comportamento descrito aqui.
- O que devo pedir para verificar uma alegação num piloto?
- Acesso ao registo de decisão e à definição de holdout. Para qualquer cliente, deve ser possível ver a ação escolhida, as alternativas consideradas, o valor esperado, os guardrails aplicados e se esse cliente estava em tratamento ou controlo. Se algum destes faltar, o número resultante não é verificável.
Comparar
Como isto se compara com as categorias que você já compra.
Neutral, side by side reads on where the decision layer sits next to the tools in your stack.
Todas as comparações- Motor de recomendação vs. Next Best ActionUm motor de recomendação apresenta o conteúdo certo. Next Best Action escolhe o tratamento comercial certo. Por que a relevância não é receita.
- Experimentação vs. Tomada de Decisão ContínuaO teste A/B prova qual variação vence numa métrica. A decisão contínua atua sobre cada cliente em cada ciclo, com um holdout. Porquê testar não é decidir.
- Calendário de Campanhas vs. Decisão ContínuaUm calendário planeia o que todos recebem e quando. A decisão contínua avalia cada cliente todos os dias. O que muda operacionalmente e o seu valor.
Vocabulário
Os termos utilizados nesta norma.
Definitions that make the commitments above checkable.
- Volume de decisãoDecision volume is the number of distinct, evidenced customer-level decisions a business makes in a period.
- Ciência de growth autónomaAutonomous growth science is the practice of running the full scientific loop over a customer base without a human in every…
- ARPUARPU, average revenue per user, is total revenue in a period divided by the average number of active users in that period.
- ARPAARPA, average revenue per account, is revenue divided by the number of accounts rather than individual users.
- ARPPUARPPU, average revenue per paying user, divides revenue only by users who paid in the period.
- Lifetime valueLifetime value is the discounted margin a business expects from a customer over the whole relationship.