Como ler um número sobre produtividade com IA

Todo número sobre produtividade com IA cabe em um de três níveis de evidência, e eles não valem igual. Aprovar investimento a partir do nível errado é a decisão mais cara de uma reunião de orçamento; separar os três é a pergunta que desmonta o slide errado.

O primeiro nível é telemetria, ou seja, registro automático de atividade, ou experimento controlado, com base grande e método publicado. Um ensaio de julho de 2025, com 16 desenvolvedores experientes e 246 tarefas nos repositórios que eles próprios mantinham, mediu 19% de lentidão a mais com IA.

Os mesmos participantes estimavam ter ficado de 20% a 24% mais rápidos. A amostra ampliada de fevereiro de 2026 ficou inconclusiva, com intervalo que vai de menos 38% a mais 9%.

De 30% a 50% dos participantes do ensaio ampliado deixaram de submeter tarefas para não executá-las sem IA. Isso enviesa a amostra que sobra, e por isso os próprios autores classificam a evidência de ganho como muito fraca.

A Faros analisou dois anos de dados de 22.000 desenvolvedores e mais de 4.000 times, telemetria vinda de organizações observadas por um fornecedor.

Ao comparar períodos de menor e maior adoção de IA, encontrou mais tarefas e pedidos de mudança. Também encontrou aumento de 242,7% nos incidentes por pedido e de 441,5% na mediana do tempo em revisão.

O estudo é observacional: mostra associação, sem provar que a IA causou as diferenças. Não representa todas as empresas e não é uma pesquisa do DORA.

Separe tarefa nova de manutenção em sistema existente, e compare trabalhos de dificuldade semelhante contando o tempo total, incluindo revisão e correção. Ganho medido numa categoria não autoriza prometer o mesmo nas demais.

O segundo nível é a declaração do fornecedor sobre o próprio produto. Em maio de 2026 a Anthropic reportou mais de 80% do código integrado à base dela escrito por modelo.

No mesmo material, ela publicou a ressalva de que o multiplicador quase certamente superestima o ganho real. Essa ressalva carrega mais informação do que o número, e é ela que evapora quando o dado atravessa uma apresentação.

O terceiro nível é o número que circula sem fonte primária localizável, e ele domina o material executivo sobre o tema. A pergunta que separa os três cabe numa linha: quem mediu, com que amostra, e o que essa pessoa vende.

Pesquisa grande mede bem o que as pessoas dizem que fazem; ensaio controlado mede o que elas de fato produziram. Tamanho de amostra não transforma declaração em desempenho medido.

Dois números do próprio mercado mostram o erro mais comum. Uma pesquisa mede 42% do código commitado com origem em IA. Outra, diferente, mede 27,4% do código integrado no primeiro trimestre de 2026, contra 22% no trimestre anterior.

Subtrair uma da outra dá um número que parece retrabalho e mede apenas a distância entre duas metodologias; números de pesquisas distintas não formam funil (a sequência de etapas medida sobre a mesma base).

A decisão de investimento exige também o custo de aprender, revisar e corrigir. Uma projeção de retorno depende dessas premissas e não equivale a ganho observado.

Em junho de 2026, o DORA alertou contra premiar consumo de tokens como produtividade. Meça custo por entrega aceita e qualidade ao longo do tempo antes de ampliar o investimento.

A regra vale para o slide que você mesmo aprova. Antes de levar um número ao conselho, escreva ao lado dele quem mediu, quando, com que amostra e o que essa pessoa vende.

O número que não sobrevive a essas quatro colunas sai da apresentação. Ele volta quando tiver fonte.

Escolha o número mais citado da próxima proposta com promessa de produtividade, normalmente o maior e o que aparece no título do slide. Preencha quem mediu, quando, com que amostra e o que vende; coluna vazia classifica o número no terceiro nível.

Peça a linha de base da sua própria empresa, entrega ao cliente e retrabalho nas quatro semanas anteriores à adoção da ferramenta. Marque a data de reavaliação em oito meses.

Se você guardar só cinco palavras, guarde estas cinco. Produção é o ambiente que cobra em receita. Contexto é o material que mais some sem ninguém notar. Reversibilidade é o custo de desfazer que define quem decide. Dívida técnica é o atalho que cobra juros depois. Linha de base é a medida sem a qual nenhum ganho se comprova.

A decisão que cabe a você é aprovar o resultado esperado e o orçamento, não desenhar a ferramenta. Defina a linha de base, o prazo do piloto e o critério para continuar, ajustar ou encerrar. Peça a fonte primária de cada número da proposta e revise no prazo combinado.