O relatório anual chega à diretoria com uma lista bonita: 22 iniciativas de melhoria concluídas em três anos, todas com ata de encerramento, todas com um gráfico de “antes e depois” mostrando o indicador melhor. A pergunta incômoda aparece um ano depois, quando alguém compara aqueles gráficos com o painel atual: o refugo voltou, o prazo de entrega voltou, o retrabalho voltou. O dinheiro foi gasto, as horas da equipe foram gastas, e o ganho não está mais lá.
Quem coordena um portfólio de melhoria conhece essa sensação. O problema não costuma ser falta de esforço nem de boas ideias. O problema é que ninguém fez a conta que importa: quanto custou cada resultado que realmente ficou. Esta página faz essa conta, com e sem método, e mostra por que a diferença é grande demais para ser tratada como detalhe.
Quanto custa não aplicar ciência da melhoria?
Custa o investimento das iniciativas cujo ganho não se sustenta, somado ao das que se sustentam, dividido apenas pelas que se sustentam. Na situação-tipo desta página, sem método, cada resultado que durou custou R$ 165.000. Com ciência da melhoria, o mesmo resultado custou R$ 45.600: uma diferença de 3,6 vezes por resultado que permanece.
Os dados desta página descrevem uma situação-tipo construída para o argumento, com valores plausíveis para uma indústria de médio porte; não são dados de uma empresa específica.
A conta que o relatório anual não mostra
Imagine uma indústria de embalagens com três plantas. Entre o primeiro e o terceiro ano, a área de excelência operacional conduziu 22 iniciativas de melhoria: redução de refugo na extrusão, troca rápida de ferramenta, revisão do fluxo de pedidos, padronização de setup. O custo médio de cada uma, somando horas da equipe, consultoria pontual e alterações físicas, foi de R$ 45.000. O investimento total no período foi de R$ 990.000.
No quarto ano, a nova gerente de operações pediu uma verificação simples: para cada iniciativa, o indicador de resultado se manteve no nível alcançado durante os 12 meses seguintes ao encerramento? A resposta foi dura. Apenas 6 das 22 iniciativas sustentaram o ganho, ou 27,3% do portfólio. As outras 16, que somam 72,7% das iniciativas e R$ 720.000 do investimento, mostravam o indicador de volta ao patamar anterior.
Quando a conta é feita por resultado que se sustenta, o número muda de natureza. O investimento total de R$ 990.000 dividido pelos 6 resultados que ficaram dá R$ 165.000 por resultado. O relatório anual dizia “R$ 45.000 por iniciativa”. O custo verdadeiro de cada melhoria que permaneceu era quase quatro vezes isso, porque cada sucesso carregou o custo de quase três iniciativas cujo ganho evaporou.
Antes de olhar por que o ganho evapora, vale fixar o critério que separa as duas colunas da conta. No trecho abaixo, o Prof. Ademir Petenate, fundador da Escola EDTI e professor da Unicamp desde 1974, explica quando uma mudança vira melhoria: impacto positivo, relevante e duradouro no indicador.
Por que o ganho evapora: mudança não é melhoria
A maior parte das 16 iniciativas perdidas tinha algo em comum: houve uma mudança, ela produziu um efeito visível nas primeiras semanas, e a equipe declarou vitória. Mudança, porém, não é melhoria. Uma mudança só vira melhoria quando produz impacto positivo, relevante e duradouro, verificado por indicadores ao longo do tempo. Sem essa verificação, o que se registrou como resultado era, muitas vezes, apenas a atenção extra que todo processo recebe enquanto está sendo observado.
O segundo mecanismo é a leitura de dois pontos. Comparar a média do mês anterior com a média do mês seguinte parece rigoroso, mas não separa o efeito da mudança da variação natural do processo. Esse tipo de comparação tem armadilhas próprias, tratadas em detalhe no texto sobre comparação antes e depois. Aqui basta registrar que boa parte dos “ganhos” do portfólio era variação por causas comuns lida como efeito.
O terceiro mecanismo é a ausência de ponto de partida medido. Em várias iniciativas, o nível anterior foi reconstruído de memória ou com dados de uma semana atípica. Sem uma baseline construída com dados no tempo, não há como saber se o indicador voltou ao patamar antigo ou se nunca saiu dele.
A mesma conta com ciência da melhoria
No quarto ano, a empresa reorganizou o portfólio a partir do Modelo de Melhoria. Cada iniciativa passou a começar pelas três perguntas fundamentais: o que queremos realizar, como saberemos que uma mudança é uma melhoria e que mudanças podemos fazer. A segunda pergunta obrigou cada equipe a definir, antes de mexer no processo, os indicadores de resultado, de processo e de equilíbrio, com definição operacional escrita.
As mudanças passaram a ser testadas em ciclos PDSA pequenos, com predição registrada antes de cada teste, em uma linha ou um turno, e só depois ampliadas. Isso reduziu o custo médio por iniciativa para R$ 38.000, porque mudanças que não funcionavam eram descartadas cedo, quando ainda eram baratas. O portfólio ficou menor: 6 iniciativas no ano, R$ 228.000 de investimento total.
Doze meses depois, 5 das 6 iniciativas mantinham o indicador de resultado no novo nível, uma proporção de 83,3%. A que não se sustentou custou R$ 38.000 e foi lida como hipótese refutada, com o aprendizado registrado. O custo por resultado que se sustenta caiu para R$ 228.000 ÷ 5 = R$ 45.600. Comparado aos R$ 165.000 do período anterior, cada resultado duradouro passou a custar 3,6 vezes menos.
| Item | Sem método (anos 1 a 3) | Com ciência da melhoria (ano 4) |
|---|---|---|
| Iniciativas conduzidas | 22 | 6 |
| Custo médio por iniciativa | R$ 45.000 | R$ 38.000 |
| Investimento total | R$ 990.000 | R$ 228.000 |
| Ganho sustentado após 12 meses | 6 (27,3%) | 5 (83,3%) |
| Investimento em ganhos que não ficaram | R$ 720.000 | R$ 38.000 |
| Custo por resultado que se sustenta | R$ 165.000 | R$ 45.600 |
O ponto da tabela não é que o ano 4 gastou menos. É que cada real passou a comprar um resultado que permanece. Um portfólio de 22 iniciativas parece mais produtivo que um de 6, até que se pergunte quantas delas ainda estão de pé um ano depois.
Como saber se um ganho se sustentou
Toda a conta depende de uma definição: o que significa “o ganho se sustentou”. Na situação-tipo, a definição operacional foi esta: o indicador de resultado, plotado mês a mês em gráfico de controle, permanece no novo nível durante 12 meses após o encerramento, sem sinal de retorno ao patamar anterior. Distinguir um deslocamento real do processo de uma oscilação por causas comuns é uma habilidade estatística que se aprende, e é parte central da formação Green Belt.
Essa definição também protege contra o erro oposto: considerar perdido um ganho que apenas oscilou dentro da variação esperada do novo processo. Dados no tempo mostram as duas coisas. Um ponto isolado não mostra nenhuma. Sem esse critério escrito antes, a verificação vira opinião, e cada área defende os próprios números.
O indicador de equilíbrio completa o quadro. Em duas das iniciativas perdidas do período sem método, o refugo caiu porque a inspeção ficou mais tolerante, e as reclamações de cliente subiram no trimestre seguinte. A melhoria de um indicador às custas de outro não entra na conta como resultado; entra como custo.
Por onde começar sem reabrir o portfólio inteiro
A primeira ação não exige método novo, só honestidade com os próprios dados: listar as iniciativas encerradas nos últimos dois ou três anos e verificar, para cada uma, se o indicador de resultado se manteve. Esse levantamento produz o número que falta em quase todo relatório de excelência operacional, o custo por resultado que se sustenta. Quem nunca fez essa conta costuma se surpreender com ela.
A segunda ação é aplicar a próxima iniciativa já com as três perguntas, a baseline e os ciclos de teste. O roteiro passo a passo está em como aplicar o Modelo de Melhoria na prática. Classificar a iniciativa pelo tipo de mudança, segundo as categorias de melhoria, ajuda a escolher quais indicadores acompanhar e por quanto tempo.
A terceira ação é mudar o que se reporta à diretoria. Em vez de “iniciativas concluídas”, reportar “resultados sustentados após 12 meses” e o custo de cada um. A métrica que a organização acompanha define o comportamento das equipes: enquanto o encerramento for o objetivo, as iniciativas serão encerradas; quando a sustentação for o objetivo, os ganhos começarão a ficar.
Conteúdo revisado pelo Master Black Belt Marcelo Petenate, estatístico, formado pela Unicamp, mestre pela USP e especialista em Lean Six Sigma e melhoria contínua. Nesta revisão, o foco foi a consistência da conta por resultado sustentado e a definição operacional de ganho que se mantém no tempo.
Para começar a ler indicadores no tempo e testar mudanças com PDSA, o White Belt gratuito da Escola EDTI é o primeiro passo.
Perguntas frequentes
O que é o custo por resultado que se sustenta?
É o investimento total de um portfólio de melhoria dividido apenas pelo número de iniciativas cujo ganho permaneceu no tempo. Ele inclui o custo das iniciativas que falharam, porque esse dinheiro também foi gasto para chegar aos resultados que ficaram. É uma medida mais honesta do que o custo médio por iniciativa.
Por quanto tempo devo acompanhar um indicador depois de encerrar uma iniciativa?
Um horizonte de 12 meses cobre a maior parte dos efeitos sazonais e das mudanças de turno, equipe e fornecedor. Para processos com ciclo mais longo, o prazo pode ser maior. O essencial é definir o prazo e o critério antes do encerramento, não depois.
Um portfólio com menos iniciativas não é sinal de menos produtividade?
Não necessariamente. Na situação-tipo desta página, o portfólio de 6 iniciativas entregou 5 resultados duradouros, quase o mesmo que as 22 iniciativas de três anos anteriores entregaram juntas. O que mede produtividade em melhoria é o resultado que permanece, não o volume de projetos encerrados.
Uma iniciativa que não se sustentou é sempre desperdício?
Depende de como foi conduzida. Quando a mudança foi testada em ciclo PDSA pequeno, com predição registrada, a falha custa pouco e produz conhecimento sobre o processo. Quando foi implantada em escala sem teste, a falha custa caro e quase nada ensina.
Preciso de software estatístico para fazer essa verificação?
Não para começar. Um gráfico de execução ou de controle feito em planilha, com os dados mensais do indicador, já mostra se o processo voltou ao patamar anterior. Ferramentas estatísticas ajudam na escala e na precisão, mas o critério e a disciplina de olhar os dados no tempo vêm antes.
Como a Escola EDTI ensina a aplicar a ciência da melhoria?
A Escola EDTI ensina o Modelo de Melhoria, o ciclo PDSA e a leitura de dados no tempo, com base em Deming e em Langley. O White Belt gratuito apresenta os fundamentos, e as formações Green Belt e Black Belt aprofundam a parte estatística e a condução de iniciativas que se sustentam.