Testar se a publicidade trouxe vendas adicionais

A reconciliação do pós-LIVE fecha a conta do que aconteceu, pedido por pedido, e o registro de intervenções deixa hipóteses à espera de teste. Nenhum dos dois responde à pergunta que decide a verba do mês seguinte: quantos desses pedidos existiriam se o anúncio estivesse desligado.

Todo painel do TikTok responde com crédito atribuído: os pedidos que a plataforma liga a um anúncio pela regra dela. O Product GMV Max conta como seus todos os pedidos dos produtos da campanha, tenha a pessoa interagido com um anúncio ou não. Decidir verba só por esse número paga venda que viria sem mídia.

Uma campanha pode receber crédito por compras que também aconteceriam sem o anúncio. O desenho de comparação procura estimar a diferença, com incerteza. Hipótese, métrica, grupos e amostra precisam ser definidos antes da leitura; o resultado pode continuar inconclusivo.

Hipótese é uma frase que pode sair errada. "Vídeo de demonstração vende mais" não passa nesse filtro. "O vídeo de demonstração de 20 segundos reduz em pelo menos 15 por cento o custo por compra do sérum no site, contra o depoimento, em 16 dias" passa, porque diz o que muda, o que se mede, quanto conta como vitória e em quanto tempo.

Escrever a hipótese antes impede que alguém mude o critério de vitória depois de ver o número, o jeito mais comum de transformar ruído em decisão. E obriga a dizer, antes, o que escala se ganhar e o que sai do ar se perder.

Controle de variáveis quer dizer mudar uma coisa por vez. Quando criativo, público e lance mudam juntos, nenhum deles explica o resultado. No TikTok a regra pesa mais, porque todo grupo de anúncios novo entra em fase de aprendizagem, e a Central de Ajuda diz que a volatilidade costuma cair depois de cerca de 25 resultados ou 7 dias.

Amostra é o volume necessário para distinguir a diferença que importa de uma oscilação casual. As referências de 25 resultados ou sete dias da aprendizagem não calculam significância estatística. Planeje tamanho, duração e métrica considerando a taxa de conversão, o efeito mínimo relevante e o desenho do teste; use a orientação da ferramenta ou apoio analítico quando necessário. Se não houver dados suficientes, registre “inconclusivo”.

Split Test: o teste A/B nativo do Ads Manager, que divide o público em dois grupos iguais. Cada grupo vê só um dos grupos de anúncios, e o TikTok declara vencedor quando a diferença atinge 90 por cento de confiança. Dá para testar segmentação, posicionamento, lance e otimização, estratégia de orçamento, criativo, catálogo e o próprio Smart+, além de um teste personalizado.

Teste de criativo compara duas ideias com público, verba e lance iguais. Teste de mídia mantém o criativo e muda a entrega: público amplo contra interesses, uma estratégia de lance contra outra.

Na LIVE, cada transmissão é um evento único, com horário, apresentadora e oferta próprios. A saída é alternar uma variável entre transmissões comparáveis e medir pedidos por mil espectadores, que corrige a diferença de audiência. Com poucas transmissões por lado, a leitura é de tendência, e o registro diz isso.

Estudos de incrementalidade medem o que o teste A/B não alcança: a venda que o anúncio criou. O Conversion Lift Study separa um grupo de controle que não vê o anúncio e entrega conversões incrementais, lift absoluto e relativo, custo por conversão incremental (CPIC) e retorno incremental sobre o investimento (iROAS), com o nível de confiança. Aceita dados da Events API, a opção recomendada, do Pixel, de parceiro de mensuração de app ou do TikTok Shop.

Acesso é o limite desses estudos. O Conversion Lift é serviço gerenciado, com investimento mínimo não publicado. O Brand Lift Study, que mede lembrança e intenção por pesquisa com grupo exposto e grupo de controle, só o gerente de conta configura. Sem gerente de conta, os dois ficam como referência de método.

Modelo de mix de mídia (MMM, a estatística que estima quanto cada canal contribui para a venda total) é o terceiro caminho. O TikTok entrega dados para esses modelos por uma MMM API e pela interface do Ads Manager, com 4 anos de dados pagos e dados conquistados desde 01/07/2023. A página cita como parceiros Nielsen, MetricWorks e Sellforte e afirma um ROI 23 vezes maior que o sugerido pelo último clique, sem publicar a metodologia desse número.

Meridian e Robyn, duas ferramentas abertas de MMM, não aparecem como parceiras na página do TikTok; quem usa uma delas alimenta o modelo com dados exportados, sem integração oficial. O MMM pede histórico longo e variação de verba entre canais, e com seis meses de loja ainda tem pouco a dizer.

Armadilha comum: tratar o ROI reportado pelo Product GMV Max como retorno do anúncio e escalar por ele. A plataforma soma ao próprio resultado o orgânico e o afiliado dos produtos da campanha, então o número sobe quando a loja vende bem por qualquer motivo. Sem grupo de controle, o processo de decisão premia o anúncio pelo trabalho do vídeo orgânico e do afiliado.

Na Aroeira Cosméticos, empresa fictícia do exemplo, o painel de julho de 2026 mostrava o Product GMV Max com ROI reportado de 5,2 sobre R$ 12.000 por mês. Com a margem média de 46 por cento dos produtos da campanha, antes de mídia e afiliado, o equilíbrio fica num ROI de 2,17, e o 5,2 parecia uma folga enorme. Helena queria dobrar a verba; Otávio pediu quatro semanas para medir antes.

Sem acesso ao Conversion Lift, a equipe do caso montou uma comparação exploratória por produto. Otávio reuniu oito pares entre os 16 itens avulsos mais vendidos e deixou os kits de fora. As metades tinham vendas históricas próximas, com diferença de até 3 por cento. Isso melhora a comparação inicial, mas não torna os produtos equivalentes nem substitui sorteio, controle de interferência e avaliação da incerteza.

De 3 a 30 de agosto, um item de cada par ficou no Product GMV Max e o outro saiu da campanha, com preço, estoque e presença nas LIVEs iguais. Como a campanha só atribui pedidos dos produtos incluídos, os oito itens de fora mostraram quanto a loja vende sem anúncio nesse tipo de produto.

Os oito produtos promovidos somaram R$ 48.900 de GMV atribuído com R$ 9.400 de gasto, ROI de cerca de 5,2. Os oito de comparação venderam R$ 24.600. A diferença de R$ 24.300 equivale a 49,7 por cento do atribuído. É uma estimativa exploratória sob a hipótese de comparabilidade dos grupos, não uma medição confirmada de vendas causadas pela campanha.

Se essa estimativa fosse válida, a conta de contribuição após mídia passaria de R$ 13.094, calculados com todo o crédito atribuído, para cerca de R$ 1.778, ainda antes das comissões pertinentes. O ROI incremental estimado seria 2,6. A diferença entre as contas mostra por que a atribuição merece revisão; não elimina a incerteza do desenho usado.

Oito pares e quatro semanas não garantem precisão nem ausência de viés. Um comprador pode trocar o item sem anúncio pelo promovido; preço, estoque e demanda também mudam. A proporção de metade será usada adiante apenas como hipótese didática para simular decisões. Na operação real, apresente um intervalo de cenários e refaça a avaliação quando as condições mudarem, sem transformar essa proporção em constante.

Os outros dois testes do período seguiram o mesmo ciclo. No site, o Split Test comparou demonstração e depoimento do sérum com cerca de R$ 170 por dia em cada grupo, por 16 dias. A demonstração fez 74 compras a R$ 36,50 cada; o depoimento, 58 a R$ 46,60, acima da meta de CPA de R$ 44,20 que Helena fixou para o site. O TikTok declarou o vencedor com 90 por cento de confiança, e o depoimento saiu do ar.

Na LIVE, a pergunta era a abertura: kit rotina ou sérum primeiro. Em julho, 12 transmissões alternaram a abertura, 6 para cada lado, sempre nos mesmos dias e horário. O kit na abertura fez 22,4 pedidos por mil espectadores; o sérum, 20,9. Entre LIVEs do mesmo lado a taxa oscilou mais de 6 pontos, e com essa variação a diferença de 1,5 não prova nada: o registro marcou inconclusivo, e a ordem ficou como estava.

Registro impede a empresa de pagar duas vezes pelo mesmo aprendizado. A planilha da Aroeira tem oito colunas: data, hipótese, variável, métrica, amostra planejada, amostra real, resultado e decisão. Em setembro tinha 9 linhas, 3 inconclusivas, e nenhum teste recomeça sem a leitura da linha anterior sobre o mesmo tema.

Na Aroeira, o painel passou a separar retorno atribuído, contribuição calculada e hipótese de venda adicional. A proposta de dobrar a verba virou um plano de testes com limite de perda. O próximo capítulo usa essa distinção para discutir escala, sem tratar a hipótese de metade como resultado comprovado ou permanente.

Abra o relatório do seu Product GMV Max e registre retorno atribuído, margem e custos no mesmo período. Depois pergunte que evidência existe sobre vendas adicionais. Não aplique o fator de 0,5 da empresa fictícia à sua operação. Enquanto a incerteza for grande, compare cenários explícitos e escolha um teste e um limite de gasto compatíveis com o risco que a empresa pode assumir.