Testar com hipótese e separar crédito atribuído de venda incremental

A reconciliação do pós-LIVE fecha a conta do que aconteceu, pedido por pedido, e o registro de intervenções deixa hipóteses à espera de teste. Nenhum dos dois responde à pergunta que decide a verba do mês seguinte: quantos desses pedidos existiriam se o anúncio estivesse desligado.

Todo painel do TikTok responde com crédito atribuído: os pedidos que a plataforma liga a um anúncio pela regra dela. O Product GMV Max conta como seus todos os pedidos dos produtos da campanha, tenha a pessoa interagido com um anúncio ou não. Decidir verba só por esse número paga venda que viria sem mídia.

Uma campanha que parece render cinco vezes o gasto pode estar pouco acima do equilíbrio, e dobrar a verba dela apaga a margem. Com hipótese, controle e amostra definidos antes, você lê o resultado como venda incremental: a venda que só existiu porque o anúncio rodou.

Hipótese é uma frase que pode sair errada. "Vídeo de demonstração vende mais" não passa nesse filtro. "O vídeo de demonstração de 20 segundos reduz em pelo menos 15 por cento o custo por compra do sérum no site, contra o depoimento, em 16 dias" passa, porque diz o que muda, o que se mede, quanto conta como vitória e em quanto tempo.

Escrever a hipótese antes impede que alguém mude o critério de vitória depois de ver o número, o jeito mais comum de transformar ruído em decisão. E obriga a dizer, antes, o que escala se ganhar e o que sai do ar se perder.

Controle de variáveis quer dizer mudar uma coisa por vez. Quando criativo, público e lance mudam juntos, nenhum deles explica o resultado. No TikTok a regra pesa mais, porque todo grupo de anúncios novo entra em fase de aprendizagem, e a Central de Ajuda diz que a volatilidade costuma cair depois de cerca de 25 resultados ou 7 dias.

Amostra é o volume que cada lado precisa acumular antes da leitura. Um piso prático sai da própria aprendizagem: nenhum lado é lido com menos de 25 resultados nem antes de 7 dias. Diferença pequena sobre amostra pequena costuma ser ruído, então o tamanho e a data de leitura entram na hipótese, e ninguém espia o resultado no meio para decidir antes da hora.

Split Test: o teste A/B nativo do Ads Manager, que divide o público em dois grupos iguais. Cada grupo vê só um dos grupos de anúncios, e o TikTok declara vencedor quando a diferença atinge 90 por cento de confiança. Dá para testar segmentação, posicionamento, lance e otimização, estratégia de orçamento, criativo, catálogo e o próprio Smart+, além de um teste personalizado.

Teste de criativo compara duas ideias com público, verba e lance iguais. Teste de mídia mantém o criativo e muda a entrega: público amplo contra interesses, uma estratégia de lance contra outra.

Na LIVE, cada transmissão é um evento único, com horário, apresentadora e oferta próprios. A saída é alternar uma variável entre transmissões comparáveis e medir pedidos por mil espectadores, que corrige a diferença de audiência. Com poucas transmissões por lado, a leitura é de tendência, e o registro diz isso.

Estudos de incrementalidade medem o que o teste A/B não alcança: a venda que o anúncio criou. O Conversion Lift Study separa um grupo de controle que não vê o anúncio e entrega conversões incrementais, lift absoluto e relativo, custo por conversão incremental (CPIC) e retorno incremental sobre o investimento (iROAS), com o nível de confiança. Aceita dados da Events API, a opção recomendada, do Pixel, de parceiro de mensuração de app ou do TikTok Shop.

Acesso é o limite desses estudos. O Conversion Lift é serviço gerenciado, com investimento mínimo não publicado. O Brand Lift Study, que mede lembrança e intenção por pesquisa com grupo exposto e grupo de controle, só o gerente de conta configura. Sem gerente de conta, os dois ficam como referência de método.

Modelo de mix de mídia (MMM, a estatística que estima quanto cada canal contribui para a venda total) é o terceiro caminho. O TikTok entrega dados para esses modelos por uma MMM API e pela interface do Ads Manager, com 4 anos de dados pagos e dados conquistados desde 01/07/2023. A página cita como parceiros Nielsen, MetricWorks e Sellforte e afirma um ROI 23 vezes maior que o sugerido pelo último clique, sem publicar a metodologia desse número.

Meridian e Robyn, duas ferramentas abertas de MMM, não aparecem como parceiras na página do TikTok; quem usa uma delas alimenta o modelo com dados exportados, sem integração oficial. O MMM pede histórico longo e variação de verba entre canais, e com seis meses de loja ainda tem pouco a dizer.

Armadilha comum: tratar o ROI reportado pelo Product GMV Max como retorno do anúncio e escalar por ele. A plataforma soma ao próprio resultado o orgânico e o afiliado dos produtos da campanha, então o número sobe quando a loja vende bem por qualquer motivo. Sem grupo de controle, o processo de decisão premia o anúncio pelo trabalho do vídeo orgânico e do afiliado.

Na Aroeira Cosméticos, o painel de julho de 2026 mostrava o Product GMV Max com ROI reportado de 5,2 sobre R$ 12.000 por mês. Com a margem média de 46 por cento dos produtos da campanha, antes de mídia e afiliado, o equilíbrio fica num ROI de 2,17, e o 5,2 parecia uma folga enorme. Helena queria dobrar a verba; Otávio pediu quatro semanas para medir antes.

Sem acesso ao Conversion Lift, a equipe montou um teste de retenção por produto (holdout: um grupo deixado de fora da mídia de propósito, que mostra o que acontece sem ela). Otávio formou 8 pares entre os 16 produtos avulsos mais vendidos, com preço e venda parecidos, e deixou os kits de fora. Em junho e julho, as duas metades tinham vendido com diferença de até 3 por cento.

De 3 a 30 de agosto, um item de cada par ficou no Product GMV Max e o outro saiu da campanha, com preço, estoque e presença nas LIVEs iguais. Como a campanha só atribui pedidos dos produtos incluídos, os oito itens de fora mostraram quanto a loja vende sem anúncio nesse tipo de produto.

O resultado mudou a conversa. Os oito produtos da campanha somaram R$ 48.900 em GMV atribuído com R$ 9.400 de gasto, o mesmo ROI de 5,2. Os oito de fora venderam R$ 24.600 sem mídia. A diferença, R$ 24.300, é a estimativa de venda incremental: 49,7 por cento do atribuído, cerca de metade.

Na margem, o crédito atribuído prometia R$ 13.094 depois da mídia; a venda incremental entregou R$ 1.778, antes ainda das comissões dos afiliados que venderam parte desses pedidos. O ROI incremental de 2,6 ficou acima do equilíbrio de 2,17 por pouco.

O registro anota os limites do teste. Oito pares e quatro semanas não dão a confiança de um Conversion Lift, e quem não achou o item de fora pode ter comprado o par de dentro, o que infla a diferença. A Aroeira adotou o fator de metade como estimativa de trabalho, a refazer a cada trimestre.

Os outros dois testes do período seguiram o mesmo ciclo. No site, o Split Test comparou demonstração e depoimento do sérum com cerca de R$ 170 por dia em cada grupo, por 16 dias. A demonstração fez 74 compras a R$ 36,50 cada; o depoimento, 58 a R$ 46,60, acima da meta de CPA de R$ 44,20 que Helena fixou para o site. O TikTok declarou o vencedor com 90 por cento de confiança, e o depoimento saiu do ar.

Na LIVE, a pergunta era a abertura: kit rotina ou sérum primeiro. Em julho, 12 transmissões alternaram a abertura, 6 para cada lado, sempre nos mesmos dias e horário. O kit na abertura fez 22,4 pedidos por mil espectadores; o sérum, 20,9. Entre LIVEs do mesmo lado a taxa oscilou mais de 6 pontos, e com essa variação a diferença de 1,5 não prova nada: o registro marcou inconclusivo, e a ordem ficou como estava.

Registro impede a empresa de pagar duas vezes pelo mesmo aprendizado. A planilha da Aroeira tem oito colunas: data, hipótese, variável, métrica, amostra planejada, amostra real, resultado e decisão. Em setembro tinha 9 linhas, 3 inconclusivas, e nenhum teste recomeça sem a leitura da linha anterior sobre o mesmo tema.

O que mudou na Aroeira foi a régua. O ROI reportado continua no painel, agora ao lado de uma coluna que o multiplica pelo fator de metade, e a proposta de dobrar a verba virou um plano de degraus com piso. O próximo capítulo usa esse piso para escalar mídia, criativo, catálogo e LIVE sem cruzar o equilíbrio.

Abra o relatório do seu Product GMV Max, anote o ROI reportado dos últimos 30 dias e multiplique por 0,5, a hipótese de trabalho até você medir o seu próprio fator. Se o resultado ficar abaixo do seu ROI de equilíbrio, nenhum aumento de verba entra no plano até um teste de retenção de quatro semanas dizer o contrário.