Cambridge, anos 1920. Numa mesa de chá, uma mulher afirma que consegue distinguir, pelo sabor, se o leite foi colocado antes ou depois do chá. A mesa acha graça. Um dos presentes, Ronald Fisher, faz outra pergunta: como testar isso de um jeito em que acertar signifique alguma coisa?
O problema não é servir chá. É que qualquer pessoa acerta por sorte de vez em quando, e um teste mal desenhado transforma sorte em prova. Fisher prepara oito xícaras, quatro de cada tipo, informa a ela que são quatro e quatro, e serve em ordem sorteada. Se ela acertar as oito, a chance de isso ter acontecido ao acaso é de uma em setenta — cerca de 1,4%.
Repare no que foi feito antes de qualquer chá ser servido: o número de xícaras, o equilíbrio entre os tipos e o sorteio da ordem foram escolhidos para que o resultado pudesse significar algo. É disso que tratam os quatro princípios da experimentação, e é por isso que eles não são formalidade acadêmica: cada um protege contra uma forma específica de o experimento produzir um número perfeito e uma conclusão sem valor.
| Princípio | Protege contra | O que acontece sem ele |
|---|---|---|
| Aleatorização | Fatores não controlados que variam junto com a ordem | O efeito medido é do turno, do lote ou do desgaste — não do fator |
| Replicação | Confundir acaso com efeito | Não existe régua para dizer se a diferença é real |
| Blocagem | Variação conhecida e incontrolável | O efeito verdadeiro fica escondido dentro do ruído |
| Desenho experimental | Efeitos que se misturam entre si | Não dá para saber a qual fator o resultado pertence |
Aleatorização
Sortear a ordem de execução dos ensaios é o princípio mais barato e o mais desobedecido, porque atrapalha a operação: obriga a trocar ajustes que poderiam ser feitos de uma vez só.
O que ele protege é simples de enunciar e difícil de perceber na hora. Tudo que muda ao longo do dia — temperatura do equipamento, desgaste da ferramenta, cansaço de quem opera, lote de matéria-prima que acabou às dez da manhã — varia junto com a ordem dos ensaios. Se você roda todas as condições de nível baixo pela manhã e as de nível alto à tarde, o efeito do seu fator e o efeito da tarde ficam somados no mesmo número, e nenhuma análise posterior separa os dois.
Aleatorizar não elimina essas influências: distribui todas elas entre as condições, em vez de deixá-las concentradas em uma. O que sobra vira variação de fundo, mensurável, em vez de viés invisível.
Replicação
Replicar é repetir a condição inteira do zero — nova preparação, novo material, novo ajuste. Não confunda com medir a mesma peça duas vezes: isso é repetição de medição, e informa sobre o instrumento, não sobre o processo.
A réplica entrega a única coisa que permite interpretar qualquer resultado: quanta variação o processo produz quando ninguém mexe em nada. Sem essa régua, uma diferença de três unidades entre duas condições é um número solto — pode ser um efeito relevante, se o processo varia meia unidade sozinho, ou pode ser nada, se ele varia quatro.
É por isso que experimento sem réplica não é experimento barato: é experimento cujo resultado não pode ser interpretado. E é a mesma lógica que sustenta a leitura de qualquer indicador — sem conhecer a variação natural, todo número parece significativo.
Blocagem
Existem fontes de variação que você conhece, não consegue controlar e não quer estudar: lote de matéria-prima, turno, máquina, dia. Blocar é agrupar os ensaios por essas fontes, garantindo que todas as condições apareçam dentro de cada grupo.
Um exemplo torna a diferença visível. Uma equipe compara dois fornecedores de resina medindo a resistência da peça final, com três lotes de matéria-prima disponíveis:
| Lote | Fornecedor X | Fornecedor Y | Diferença |
|---|---|---|---|
| 1 | 44 N | 47 N | +3 |
| 2 | 52 N | 55 N | +3 |
| 3 | 48 N | 51 N | +3 |
| Média | 48 N | 51 N | +3 |
A vantagem do fornecedor Y é de 3 newtons, e ela é consistente nos três lotes. Mas a variação entre lotes é de 8 newtons — quase três vezes maior que o efeito procurado. Se os ensaios tivessem sido distribuídos sem considerar o lote, com X testado mais no lote 1 e Y mais no lote 2, a conclusão sairia inflada; se fosse ao contrário, o efeito desapareceria por completo.
Blocar por lote tira essa variação conhecida de dentro do erro experimental e deixa o efeito do fornecedor visível. O princípio é conhecido pela formulação de Fisher: bloque o que puder, aleatorize o que não puder.
Desenho experimental
O quarto princípio é a escolha das combinações que serão rodadas. Não é detalhe operacional: é o que determina quais perguntas o experimento poderá responder.
Um desenho balanceado — cada fator aparecendo o mesmo número de vezes em cada nível, combinado com todos os outros — permite estimar o efeito de cada fator separadamente e também as interações entre eles. Um desenho desbalanceado, montado pela conveniência da produção, mistura efeitos: o resultado existe, mas não dá para dizer a qual fator ele pertence.
É também aqui que entra a decisão de quantos ensaios rodar, e a troca entre completo e fracionado. A montagem prática da matriz, com sinais, níveis e ordem, está em como implementar um experimento fatorial; o conceito de delineamento e a lógica do fracionado estão em DOE: o que é delineamento de experimentos.
Os princípios não substituem a leitura no tempo
Um experimento bem desenhado responde a uma pergunta em condições controladas, num período delimitado. Ele não garante que a condição vencedora vai se sustentar no processo real, com outro lote, outro operador e outro mês.
Por isso a etapa seguinte a qualquer experimento é a confirmação: rodar a condição escolhida em produção e acompanhar o indicador em sequência, com uma carta de controle. O experimento diz o que testar; a leitura no tempo diz se virou melhoria. São dois trabalhos distintos, e o segundo é o que a maioria das equipes pula.
Conduzir esse percurso inteiro — desenhar o experimento, executar com disciplina e confirmar o resultado no processo — é o que a formação Green Belt desenvolve. O raciocínio que sustenta tudo isso começa antes, e de graça, na certificação White Belt da EDTI.
Conteúdo revisado pelo Master Black Belt Marcelo Petenate, estatístico, formado pela Unicamp, mestre pela USP e especialista em Lean Six Sigma e melhoria contínua. Nesta revisão, o foco foi o que cada princípio da experimentação protege e o efeito prático de ignorá-lo.
Perguntas frequentes
Quais são os princípios básicos da experimentação?
Aleatorização, replicação, blocagem e desenho experimental. Os três primeiros foram formalizados por Ronald Fisher nos anos 1920 e 1930; o quarto trata da escolha das combinações que serão rodadas, que define quais perguntas o experimento consegue responder.
Qual a diferença entre replicação e repetição?
Replicar é refazer a condição inteira — nova preparação, novo material, novo ajuste. Repetir é medir várias vezes a mesma peça produzida. A réplica informa sobre a variação do processo; a repetição de medição informa sobre a variação do sistema de medição.
Por que a aleatorização é necessária?
Porque tudo que muda ao longo do tempo — temperatura do equipamento, desgaste, turno, lote — se confunde com o efeito dos fatores quando os ensaios seguem uma ordem organizada. O sorteio distribui essas influências entre as condições em vez de concentrá-las em uma delas.
O que é blocagem em um experimento?
É agrupar os ensaios por uma fonte de variação conhecida e incontrolável — lote, turno, máquina —, garantindo que todas as condições apareçam dentro de cada grupo. Isso retira essa variação do erro experimental e torna o efeito estudado mais fácil de detectar.
É possível experimentar sem seguir esses princípios?
É possível rodar ensaios e tabular resultados, e isso costuma parecer ciência. O que não é possível é saber se a conclusão vale: sem aleatorização o efeito pode ser do turno, sem réplica não há régua para o acaso, sem blocagem o efeito some no ruído e sem desenho balanceado os efeitos se misturam.
Preciso de formação estatística para aplicar os quatro princípios?
Para aplicá-los, não — sortear a ordem, repetir condições e agrupar por lote são decisões de planejamento, não de cálculo. A formação entra em dimensionar o experimento, reconhecer quando o processo não está em condição de ser testado e transformar o resultado em mudança sustentada, que é o que as formações Lean Six Sigma da EDTI ensinam.