Educação baseada em evidências e os limites da memória de trabalho

Resultado e mapa da aula

Ao final desta aula você vai conseguir fazer três coisas que separam uma conversa pedagógica informada de uma conversa de impressões.

A primeira: diante de uma aula que não funcionou, distinguir qual parte da dificuldade pertencia ao conteúdo e qual foi criada pela forma de apresentar, explicar ou pedir a tarefa — em vez de concluir que a turma "não prestou atenção". A segunda: explicar por que uma explicação que é clara para você pode ser rápida demais para quem está começando, usando a arquitetura da memória e não a intuição. A terceira: pegar qualquer afirmação do tipo "esta técnica funciona, tem evidência" e submetê-la a três critérios — relevância, suficiência e veracidade — antes de mudar a sua prática.

1. Vemos por que a resposta "então vamos simplificar tudo" está errada, e o que fazer no lugar dela.
2. Separamos dificuldade inerente ao conteúdo de dificuldade criada pelo ensino, com um caso de aula de porcentagem.
3. Mapeamos a arquitetura da memória: sensorial, de trabalho e de longo prazo — e onde está o gargalo.
4. Entendemos esquemas, a diferença iniciante/especialista e o efeito Mateus.
5. Aprendemos a julgar evidências por relevância, suficiência e veracidade — com uma análise completa de uma alegação real, as três alternativas à causalidade e o que "significativo" não quer dizer.
6. Praticamos com 5 casos comentados e 5 perguntas de verificação.

Esta é a primeira de quatro aulas. A Aula 2 detalha os três tipos de carga; a Aula 3 transforma tudo em desenho de aula; a Aula 4 leva para palestras e slides. O glossário define cada termo técnico usado aqui.

O problema real: a aula parecia boa, e ninguém aprendeu

Uma professora de biologia planeja uma aula sobre fotossíntese. Ela prepara 35 slides: história da descoberta, estrutura do cloroplasto, pigmentos, equação química, reações dependentes e independentes de luz, fatores ambientais, curiosidades e uma lista de exercícios. Durante a aula, os estudantes fazem anotações e acompanham com o olhar. Ninguém interrompe. Ao final, quando ela pergunta de onde vem a matéria orgânica produzida pela planta, ninguém responde.

A conclusão intuitiva é imediata: eles não prestaram atenção.

Há uma explicação alternativa, e ela muda tudo: os estudantes podem ter passado a aula inteira tentando sustentar informação demais ao mesmo tempo. Não é uma desculpa; é uma hipótese com consequências práticas diferentes. Se a hipótese for essa, aumentar a cobrança não resolve nada. Reorganizar a sequência, sim.

Essa é a mudança de pergunta que atravessa o curso inteiro:

Considere o objetivo "o estudante deve interpretar um gráfico de crescimento populacional". Para realizá-lo, ele talvez precise reconhecer e relacionar: título, eixos, escalas, legenda, intervalo de tempo, variável representada, tendência, comparação entre linhas e vocabulário de interpretação. Se tudo isso for novo, pedir uma análise sofisticada de imediato cria uma exigência excessiva. Se os componentes já forem conhecidos, a mesma tarefa pode ser perfeitamente adequada. A tarefa é a mesma; o que muda é quem a recebe.

Parte I — Complexidade não é o inimigo

Há uma confusão recorrente. Se a memória de trabalho é limitada, então seria melhor simplificar tudo, reduzir o conteúdo ao mínimo ou evitar temas difíceis. Esse raciocínio está errado, e é importante desarmá-lo logo no início, porque ele transforma uma teoria sobre desenho de instrução em um argumento contra rigor.

Alguns conteúdos são, de fato, complexos. Resolver uma equação, interpretar um gráfico, analisar uma fonte histórica, escrever um texto argumentativo, compreender fotossíntese ou aprender um procedimento clínico exige lidar com relações entre vários elementos. Não há como transformar qualquer tema importante em algo instantaneamente fácil — e não deveria haver.

O trabalho de quem ensina é outro: preservar a complexidade que é necessária e retirar a complexidade que foi acrescentada pelo modo de ensinar.

Onde o ensino acrescenta dificuldade que não ensina nada

Uma explicação pode dificultar desnecessariamente algo que já é desafiador. Isso acontece, por exemplo, quando:

• a apresentação traz muitos conceitos novos antes de explicar a relação entre eles;
• a instrução oral compete com um slide cheio de texto que repete, palavra por palavra, o que está sendo dito;
• o estudante recebe uma tarefa antes de ver qualquer modelo de como resolvê-la;
• os exemplos mudam de contexto e de formato a cada minuto;
• a atividade exige dominar simultaneamente um conceito, uma ferramenta digital, um vocabulário novo e uma regra de avaliação que ninguém explicou;
• quem ensina supõe conhecimentos prévios que o grupo ainda não possui.

Em todos esses casos, o aluno pode parecer "desatento", "sem interesse" ou "sem capacidade", quando, na verdade, está tentando sustentar informação demais ao mesmo tempo.

Duas dificuldades, dois diagnósticos

Uma ferramenta prática é separar dois tipos de dificuldade.

Dificuldade inerente ao conteúdo é aquela ligada à própria estrutura da aprendizagem. Em matemática, uma fração envolve numerador, denominador, equivalência e relações parte-todo. Em língua portuguesa, escrever uma resenha exige ler, selecionar ideias, tomar posição, organizar argumentos e adequar a linguagem. Em enfermagem, administrar um medicamento exige conhecer indicação, dose, via, segurança e comunicação com o paciente.

Dificuldade criada pelo ensino nasce da apresentação ou da tarefa. Ela aparece em um enunciado ambíguo, numa tela poluída, numa sequência sem exemplos, numa explicação veloz, em material com fontes difíceis de ler, numa atividade que usa tecnologia desconhecida ou em critérios de avaliação ocultos.

Essa distinção é valiosa porque muda a conversa depois de um mau resultado. Em vez de perguntar "por que eles não aprenderam?", experimente estas cinco perguntas:

1. Qual parte era inevitavelmente difícil?
2. Que pré-requisito era necessário?
3. Que informação concorreu por atenção sem ajudar o objetivo?
4. Em qual ponto o estudante precisava tomar uma decisão sem possuir ainda um modelo?
5. O erro revela ausência de conhecimento, confusão entre conceitos ou simplesmente leitura equivocada da instrução?

Caso prático: uma aula de porcentagem

Imagine uma turma do 7º ano e a meta de calcular desconto percentual.

Uma versão pouco orientada pela carga pode começar com a definição formal, introduzir razão, proporção, fração decimal, regra de três, porcentagem, taxas sucessivas e uma lista de 20 problemas contextualizados. Alguns alunos acompanham porque já dominam frações e decimais; outros ficam presos logo no primeiro cálculo. Ao final, quem ensina observa respostas em branco e conclui que a turma "não quer pensar".

Uma versão mais bem organizada pode seguir este percurso:

1. Recuperar rapidamente: "quanto é metade de 80? E 10% de 80?"
2. Explicitar o sentido: porcentagem é uma forma de expressar uma parte em cada 100.
3. Modelar um problema simples: produto de R$ 80 com 10% de desconto. Mostrar a decisão, não apenas a conta.
4. Resolver junto um segundo problema de mesma estrutura, trocando apenas os números.
5. Propor um problema individual curto e verificar respostas.
6. Acrescentar uma variação — 25%, preço não redondo ou desconto seguido de acréscimo — somente quando a estrutura anterior estiver estável.
7. Retomar no dia seguinte com duas questões sem consulta.

O conteúdo continua exigente. A diferença é que o aluno não precisa descobrir sozinho, simultaneamente, o significado da porcentagem, a operação apropriada e a lógica de um problema novo.

Quando reduzir informação ajuda — e quando atrapalha

Reduzir informação ajuda quando ela não contribui diretamente para o objetivo de aprendizagem. Pode ser útil cortar animações decorativas, imagens sem função, detalhes históricos prematuros, exemplos redundantes ou instruções paralelas.

Mas reduzir informação atrapalha quando elimina uma relação necessária. Em uma aula de geografia, remover o contexto social de um mapa pode tornar a leitura mais "rápida", mas menos significativa. Em literatura, resumir um romance a uma lista de personagens pode impedir a compreensão do conflito. Em ciências, evitar toda representação visual para "não confundir" pode privar o estudante de um apoio essencial.

Portanto, a pergunta não é "quanto conteúdo cabe no slide?", e sim: esta informação torna a aprendizagem mais provável ou apenas ocupa espaço de processamento?

Sinais de sobrecarga cognitiva

Sobrecarga não se prova apenas porque a turma parece cansada. Ela é uma hipótese a ser investigada. Alguns sinais frequentes:

• estudantes acertam exemplos idênticos, mas travam diante de uma pequena mudança;
• muitos perguntam o que fazer mesmo após receber instruções;
• as respostas repetem palavras de quem ensina sem demonstrar relações entre ideias;
• o grupo conclui tarefas operacionais, porém não consegue explicar o que fez;
• alunos experientes avançam enquanto iniciantes abandonam a atividade rapidamente;
• aparecem erros sistemáticos no mesmo passo de um procedimento;
• a participação diminui justamente quando vários elementos novos entram em cena.

Esses sinais não significam automaticamente que a aula está mal planejada. Talvez o grupo esteja cansado, talvez haja lacunas anteriores, talvez o tempo seja insuficiente ou o objetivo esteja grande demais para uma única aula. O ponto é trocar interpretação apressada por investigação pedagógica.

Um protocolo breve para redesenhar uma atividade

Quando uma atividade falhar, faça um redesenho em sete perguntas:

1. Qual era o resultado de aprendizagem esperado?
2. Quais conhecimentos prévios a tarefa pressupunha?
3. Quantos elementos novos precisavam ser combinados?
4. O aluno viu um exemplo resolvido ou critério claro antes de tentar?
5. Que elementos de apresentação poderiam ser removidos, separados ou reorganizados?
6. Como eu verificaria compreensão antes da tarefa mais difícil?
7. Que prática de recuperação ajudará a manter essa aprendizagem depois?

Não é necessário aplicar as sete perguntas de forma burocrática em toda aula. Elas são mais úteis em conteúdos novos, turmas heterogêneas, procedimentos de alto risco ou momentos em que a aprendizagem anterior não apareceu como esperado.

Pergunta 1 de 5

Uma turma resolve corretamente os exercícios idênticos ao exemplo da aula, mas erra sistematicamente quando um único dado do enunciado muda. Qual é a leitura mais defensável desse resultado?

A turma não estudou o suficiente; é preciso aumentar a quantidade de exercícios idênticos.O grupo reconheceu a superfície do exemplo sem formar a estrutura; falta comparação entre casos e variação guiada.A tarefa está fácil demais e deveria ser substituída por um problema totalmente aberto.O conteúdo é complexo demais para a série e deveria ser adiado para o ano seguinte.

Parte II — A arquitetura da memória: onde está o gargalo

Para decidir o que cabe numa explicação, é preciso saber onde a informação passa. Esta é a arquitetura mínima que sustenta todas as decisões das próximas três aulas.

Da esquerda para a direita: o material da aula e o ruído da instrução disputam o mesmo filtro de atenção. Só o que recebe atenção chega à memória de trabalho, que sustenta poucas unidades ativas por vez. Dali, o que é organizado e conectado chega à memória de longo prazo — como episódio vivido, como fato/conceito e, com prática e revisitação, como esquema. A seta de volta é a mais importante da aula: um esquema já formado retorna à memória de trabalho como uma unidade só, e por isso reduz a demanda de quem já sabe.

Memória não é uma coisa única

Duas distinções bastam para o que faremos aqui.

Memória episódica guarda eventos vividos: a aula de terça, o experimento que deu errado, a conversa com o paciente. Memória semântica guarda fatos, conceitos e significados desligados do episódio: o que é uma fração, o que significa "controle de variáveis", como se chama determinado procedimento.

Essa distinção explica um fenômeno comum: um estudante lembra nitidamente da aula — onde estava, o que foi projetado, uma piada — e não consegue usar o conteúdo da aula. Lembrar do episódio não é a mesma coisa que ter o conceito disponível.

Mas o par decisivo para o ensino é outro: memória de trabalho versus memória de longo prazo.

A memória de trabalho é o ponto estreito

A memória de trabalho pode ser entendida como o espaço mental usado para manter e manipular informação no momento presente. Ao ler uma frase longa, você precisa reter o começo enquanto integra o final. Ao resolver um problema, precisa manter dados, regras e etapas ativas. Ao ouvir uma explicação, precisa conectar a fala atual ao que acabou de ser dito.

Esse espaço é limitado. A revisão clássica de Nelson Cowan reconsiderou o famoso "sete, mais ou menos dois" de Miller e reuniu evidência convergente para um limite bem menor: quando não é possível agrupar itens nem ensaiá-los, a capacidade do foco de atenção fica em torno de três a cinco unidades, com média próxima de quatro em adultos (Cowan, 2001, Behavioral and Brain Sciences 24(1), 87–114).

A memória de longo prazo, por contraste, não tem esse limite prático. Ela armazena estruturas organizadas de conhecimento. E é justamente essa assimetria — um funil estreito na frente, um armazém grande atrás — que a teoria da carga cognitiva usa como ponto de partida (Sweller, van Merriënboer e Paas, 2019, Educational Psychology Review 31, 261–292).

Esquemas: o conhecimento organizado que economiza esforço

Um esquema é uma estrutura organizada de conhecimento. Não é uma simples lista decorada; é uma rede que permite reconhecer padrões, prever passos e atribuir significado.

Pense na leitura. Uma pessoa alfabetizada não percebe cada letra como um problema separado: ela reconhece palavras, frases e gêneros textuais. Em xadrez, o iniciante vê peças isoladas; o jogador experiente reconhece configurações recorrentes. Na escrita, o estudante que conhece a estrutura de um argumento consegue concentrar-se no conteúdo de sua tese, enquanto o iniciante precisa decidir, ao mesmo tempo, onde começar, como organizar parágrafos, como citar e como concluir.

O estudo que documentou isso com mais clareza pediu a especialistas e iniciantes em física que agrupassem problemas por semelhança. Os iniciantes agruparam pela aparência do enunciado — problemas com plano inclinado juntos, problemas com mola juntos. Os especialistas agruparam pelo princípio físico envolvido: conservação de energia de um lado, segunda lei de Newton de outro. A diferença não era velocidade nem esforço; era como o problema é representado desde o primeiro olhar (Chi, Feltovich e Glaser, 1981, Cognitive Science 5(2), 121–152).

Para quem ensina, a implicação é direta e desconfortável: o seu nível não serve de régua para o nível do grupo. Quem domina um tema já agrupou muita informação em padrões e explica como se o público enxergasse os mesmos agrupamentos. O público ainda não enxerga. Antes de pedir desempenho complexo, é preciso ajudar a formar os esquemas relevantes — com vocabulário, exemplos, representações, classificações, prática guiada e comparação de casos.

O efeito Mateus: quem já sabe aprende mais rápido

"Ao que tem, mais será dado." A expressão foi trazida para a pesquisa educacional por Keith Stanovich para descrever um padrão bem documentado na aquisição de leitura: crianças que leem melhor leem mais, ampliam vocabulário e conhecimento de mundo, e passam a compreender textos ainda mais rapidamente — enquanto quem começou atrás se distancia progressivamente (Stanovich, 1986, Reading Research Quarterly 21(4), 360–407).

Não é uma sentença sobre capacidade fixa. É um alerta sobre desigualdade acumulada de oportunidades de aprender, e tem duas consequências de planejamento.

A primeira: não trate conhecimento prévio como detalhe. Ele é condição de acesso, não pré-requisito burocrático. A segunda: não ofereça somente atividades abertas e complexas a quem ainda não construiu a base necessária. Um aluno pode beneficiar-se de discussão, pesquisa e resolução de problemas — mas talvez precise antes de um repertório mínimo para participar de modo produtivo. Uma sala em que só quem já sabe consegue participar amplia a distância que diz querer reduzir.

Como verificar conhecimento prévio sem constranger

Sondar conhecimento prévio não precisa ser uma prova classificatória. Pode ser uma estratégia rápida de ensino:

• uma pergunta de múltipla escolha com justificativa curta;
• pedir que estudantes desenhem como entendem um processo;
• um "escreva tudo o que lembra em dois minutos";
• cartões de verdadeiro/falso, seguidos de conversa sobre as justificativas;
• uma questão-problema simples cuja resolução revela os pré-requisitos;
• uma nuvem de palavras anônima, quando se usa recurso digital;
• uma conversa de abertura: "o que deste tema vocês já viram, ouviram ou fizeram?".

O erro é tratar a sondagem como tribunal. Seu objetivo é informar a próxima decisão: retomar, avançar, agrupar estudantes, oferecer um exemplo adicional ou mudar a linguagem da explicação.

Caso prático: ensinar leitura de artigo científico

Para um pesquisador, um artigo traz seções familiares: resumo, introdução, método, resultados, discussão, referências. Para quem nunca leu um texto desse tipo, tudo pode parecer igualmente importante. Pedir uma "análise crítica" de primeira costuma produzir cópias do resumo ou comentários vagos.

Uma sequência possível:

1. Mostrar a arquitetura de um artigo e a função de cada seção.
2. Ler coletivamente apenas o resumo, localizando pergunta, método, participantes e resultado principal.
3. Apresentar um exemplo curto de diferença entre opinião do autor e dado relatado.
4. Modelar como verificar se a conclusão combina com o método descrito.
5. Entregar um segundo texto com um roteiro de leitura.
6. Gradualmente retirar o roteiro e pedir comparação entre artigos.

O objetivo final continua sendo uma análise crítica robusta. A progressão não reduz rigor; ela prepara a estrutura cognitiva que o rigor exige.

Aprender para a vida, não para a prova

Para haver retenção, novas informações precisam ser processadas, organizadas e conectadas a conhecimentos existentes. O estudo concentrado na véspera pode gerar desempenho imediato sem aprendizagem duradoura — e esse não é um palpite de sala de aula, é um dos achados mais replicados da psicologia cognitiva.

Em um experimento clássico, estudantes universitários leram textos científicos curtos. Um grupo releu o texto quatro vezes; outro leu uma vez e usou o tempo restante para tentar escrever tudo o que lembrava, sem consultar. Cinco minutos depois, os que releram pareciam ter vencido: recordaram mais. Uma semana depois, a relação se inverteu com folga — os que praticaram recuperação retiveram substancialmente mais (Roediger e Karpicke, 2006, Psychological Science 17(3), 249–255).

A síntese mais ampla sobre técnicas de estudo classificou prática de recuperação e prática distribuída como as de maior utilidade geral, e colocou releitura e marcação de texto entre as de baixa utilidade — apesar de serem as mais populares entre estudantes (Dunlosky, Rawson, Marsh, Nathan e Willingham, 2013, Psychological Science in the Public Interest 14(1), 4–58). A meta-análise específica sobre espaçamento confirma que o intervalo ótimo entre revisões cresce conforme cresce o prazo de retenção pretendido (Cepeda, Pashler, Vul, Wixted e Rohrer, 2006, Psychological Bulletin 132(3), 354–380).

Recupere da memória

Sem olhar para cima: por que a mesma tarefa pode ser leve para um estudante e inviável para outro, mesmo que os dois tenham a mesma inteligência e o mesmo esforço?

Tente responder em voz alta ou por escrito antes de conferir. O esforço de recuperar é o que fortalece a memória — reler a resposta não produz o mesmo efeito.

Conferir resposta

Pergunta 2 de 5

Um professor lê os slides em voz alta, com o mesmo texto projetado, e conclui que a turma aprendeu porque ninguém fez perguntas. Segundo a arquitetura cognitiva apresentada, qual é o problema mais grave desse raciocínio?

Ler em voz alta é sempre pedagogicamente inadequado, independentemente do conteúdo.Ausência de perguntas mede conforto ou silêncio, não passagem de informação para a memória de longo prazo.Slides com texto nunca devem ser usados em nenhuma circunstância de ensino.O problema é apenas estético: os slides deveriam ter menos texto e mais imagens.

Parte III — Educação baseada em evidências sem virar receita

Esta é a parte da aula com maior poder de transferência, e vale dizer por quê antes de começar: tudo o mais que você vai aprender nesta trilha chegou até você como uma afirmação. "A memória de trabalho sustenta cerca de quatro unidades." "Exemplos resolvidos ajudam iniciantes." Sem um método para julgar afirmações, você troca um conjunto de crenças por outro — e fica exatamente tão vulnerável à próxima moda quanto era antes.

A vulnerabilidade não é hipotética, e não atinge apenas quem não estuda. Um levantamento com 242 professores do Reino Unido e da Holanda — professores que se interessavam ativamente por neurociência da aprendizagem — mediu quantas afirmações falsas sobre o cérebro eles aceitavam. Em média, aceitaram 49% dos "neuromitos" testados. A afirmação de que "as pessoas aprendem melhor quando recebem a informação no seu estilo de aprendizagem preferido" foi aceita por 93% dos professores holandeses e 96% dos britânicos.

E o achado mais desconfortável: ter mais conhecimento geral sobre o cérebro previu acreditar em mais mitos, não menos (Dekker, Lee, Howard-Jones e Jolles, 2012, Frontiers in Psychology 3, 429).

O que a expressão realmente quer dizer

"Baseado em evidências" é, muitas vezes, usado como selo de prestígio. Alguém apresenta uma técnica, acrescenta que ela "tem evidência" e espera que a conversa termine ali. A definição original é bem mais exigente — e bem mais humilde.

O texto fundador da medicina baseada em evidências define a prática como "o uso consciencioso, explícito e criterioso da melhor evidência atual para tomar decisões sobre o cuidado de pacientes individuais", e é explícito ao dizer que praticá-la significa integrar a experiência clínica individual com a melhor evidência externa disponível — nunca substituir uma pela outra. O mesmo texto acrescenta duas advertências que costumam ser esquecidas: sem a experiência individual, a prática corre o risco de ser "tiranizada pela evidência", porque mesmo uma evidência excelente pode ser inaplicável a um paciente específico; e sem a evidência externa, a prática corre o risco de ficar desatualizada (Sackett, Rosenberg, Gray, Haynes e Richardson, 1996, BMJ 312(7023), 71–72).

Transposto para educação, uma decisão didática bem fundamentada combina pelo menos quatro fontes de informação:

1. A melhor evidência disponível: estudos e sínteses relevantes à pergunta.
2. A experiência e o julgamento profissional: quem ensina interpreta o que é plausível, viável e eticamente adequado.
3. As características do estudante e do grupo: conhecimentos prévios, necessidades, língua, interesses, tempo, condições de participação e apoios necessários.
4. Os objetivos e valores educacionais: o que se pretende formar, o que conta como aprendizagem e quais prioridades a instituição assumiu.

Esse modelo evita dois extremos. Um é decidir apenas por tradição, preferência pessoal ou tendência do momento. Outro é imaginar que um estudo, isoladamente, entrega um protocolo universal que elimina a necessidade de pensar.

"Funciona?" é uma pergunta incompleta

Quando alguém pergunta se uma estratégia "funciona", a pergunta não tem resposta na forma em que foi feita. Ela precisa ser decomposta:

• Funciona para aprender o quê? Recordar, explicar, aplicar, transferir, decidir?
• Para quem? Iniciante ou avançado no domínio específico?
• Em que etapa: introdução, prática, retenção, transferência, engajamento ou avaliação?
• Em qual contexto: presencial, remoto, turma iniciante, formação profissional, atendimento individual?
• Comparada a quê? A nada, ao que já fazíamos, ou à melhor alternativa disponível?
• Com quais recursos, tempo e preparação?
• Com que possível custo ou efeito colateral?

A quinta pergunta — comparada a quê — é a que mais falta na prática e a que mais muda conclusões. "Nosso novo método melhorou o desempenho" pode significar "melhorou em relação a não fazer nada", que é um patamar baixíssimo, ou "melhorou em relação à melhor alternativa que já usávamos", que é uma afirmação muito mais forte. Quase nunca fica claro qual das duas está em jogo.

Relevância, suficiência e veracidade

Três critérios organizam o julgamento de evidências. Eles servem não apenas para ler artigos, mas para analisar posts, cursos, palestras, materiais comerciais e afirmações muito compartilhadas.

Análise completa: uma alegação do mundo real, do começo ao fim

Descrever os três critérios é fácil. Aplicá-los sob pressão, numa reunião, com um fornecedor articulado do outro lado, é outra coisa. Vamos fazer isso passo a passo.

Passo 1 — Enuncie a afirmação com precisão. Não "a plataforma é boa", mas: usar esta plataforma causa aumento de aprendizagem em matemática, em alunos como os nossos. Três componentes: causa, desfecho (aprendizagem em matemática) e população.

Passo 2 — Relevância. O desfecho medido foi a nota no teste interno da própria plataforma. Isso não é aprendizagem de matemática; é desempenho no instrumento de quem fez a afirmação. Alunos que treinaram 20 horas naquele formato ficarão melhores naquele formato — o que pode não transferir para uma prova externa, para um problema novo ou para o uso do conceito em outra disciplina. Veredito: a medida não responde à afirmação. Pergunta a fazer: "vocês têm resultado em alguma avaliação externa ou independente da plataforma?"

Passo 3 — Veracidade. Há dois problemas graves de desenho, e nenhum deles depende de má-fé.

O primeiro é viés de seleção: os grupos não foram formados por sorteio. Quem escolheu usar a plataforma por 20 horas ou mais provavelmente já era mais motivado, mais organizado, tinha mais tempo, melhor acesso a internet e, muito possivelmente, mais conhecimento prévio de matemática. A comparação não é "com plataforma" contra "sem plataforma"; é "alunos engajados" contra "alunos menos engajados". Esses alunos teriam tirado notas maiores mesmo sem a plataforma.

O segundo é o corte por dose: filtrar quem usou "pelo menos 20 horas" exclui exatamente quem abandonou. Se metade dos alunos desistiu na segunda semana, essa metade sumiu do numerador e do denominador — e desistência é, muito provavelmente, um resultado da intervenção, não algo independente dela. Veredito: o desenho não sustenta uma afirmação causal. Pergunta a fazer: "quantos alunos começaram e quantos chegaram às 20 horas? O que aconteceu com quem não chegou?"

Passo 4 — Suficiência. Um estudo, conduzido pelo próprio fornecedor, em escolas parceiras (que também não são uma amostra qualquer), sem replicação independente. Veredito: insuficiente para uma decisão de compra em escala.

Passo 5 — O número. "32% de aumento" não informa quase nada sem saber 32% de quê: da nota média? Da proporção de acertos? Da diferença em relação a um ponto de partida muito baixo? Um aumento percentual sobre uma base baixa parece dramático e pode ser trivial. Pergunta a fazer: "qual é o tamanho de efeito padronizado, e qual era a média do grupo de comparação?"

Passo 6 — A decisão. Recusar é tão automático quanto aceitar, e igualmente pouco pensado. A resposta proporcional é: esta evidência não sustenta a compra em escala, e não é motivo para descartar o produto. O caminho é um piloto com desenho melhor — turmas comparáveis, desfecho definido antes e medido por instrumento independente da plataforma, acompanhamento de quem abandona, e uma pergunta explícita sobre para qual objetivo a ferramenta serve. O custo desse piloto é uma fração do contrato.

O que "significativo" não quer dizer

Três números diferentes são rotineiramente confundidos, e a confusão custa caro.

Significância estatística responde: é provável que este resultado tenha aparecido por acaso? Ela depende fortemente do tamanho da amostra. Com 50 mil alunos, diferenças minúsculas e irrelevantes se tornam "estatisticamente significativas". Com 30 alunos, um efeito real e importante pode não alcançar significância. Significância não é sinônimo de importância.

Tamanho de efeito responde: quão grande é a diferença? Costuma ser expresso em desvios-padrão. É o número que importa para decidir, e é o que quase nunca aparece no slide de vendas.

Importância prática responde: vale a pena, dado o custo, o tempo e as alternativas? Depende do contexto, não do artigo.

E aqui há uma armadilha específica de educação. As faixas herdadas de outras áreas — 0,2 pequeno, 0,5 médio, 0,8 grande — levam a descartar como "pequena" praticamente toda intervenção educacional real. Uma análise de perto de 750 ensaios randomizados de intervenções educacionais com desfechos padronizados de aprendizagem propôs faixas empíricas muito diferentes para essa literatura: abaixo de 0,05 desvio-padrão é pequeno; de 0,05 a 0,20 é médio; 0,20 ou mais é grande (Kraft, 2020, Educational Researcher 49(4), 241–253).

Médias escondem distribuições

Um efeito médio positivo é compatível com um subgrupo que melhorou muito e outro que piorou. E isso não é uma curiosidade estatística: é uma previsão direta da teoria que você estudará na Aula 2.

O efeito de reversão da expertise diz que um apoio adequado a iniciantes pode ser inútil ou prejudicial para quem já domina o conteúdo. Se um estudo mistura iniciantes e avançados, a média entre "ajudou muito" e "atrapalhou um pouco" pode dar "ajudou um pouco" — e essa média não descreve ninguém. Aplicar a conclusão média a uma turma avançada produz o efeito oposto ao esperado.

Perguntas que protegem: o estudo reporta resultados por subgrupo, especialmente por nível de conhecimento prévio? Existe algum grupo para o qual o efeito foi nulo ou negativo? A minha turma se parece com a média do estudo ou com um dos extremos?

Por que estudos sobre o mesmo tema discordam

Antes de concluir que "a pesquisa não se decide", verifique as quatro explicações mais comuns — e note que nenhuma delas implica que algum dos estudos esteja errado.

1. Rótulos amplos escondem práticas diferentes. O exemplo mais nítido está nas duas meta-análises sobre "aprendizagem por descoberta", com 164 estudos: a descoberta não assistida ficou atrás da instrução explícita (d = −0,38), enquanto a descoberta assistida — com pergunta clara, andaime e devolutiva — superou outras formas de instrução (d = 0,30). Os dois resultados são do mesmo guarda-chuva e têm sinais opostos (Alfieri, Brooks, Aldrich e Tenenbaum, 2011). Quem citar só um dos dois números "comprova" o que quiser.
2. Populações diferentes. O mesmo apoio muda de sinal conforme o repertório prévio de quem aprende.
3. Fidelidade de implementação. Uma prática implementada pela metade não é a mesma prática. Um resultado nulo pode significar "não funciona" ou "não foi feito".
4. Desfechos e prazos diferentes. Medir no dia seguinte e medir em um mês produz conclusões opostas para várias técnicas de estudo.

Some-se a isso um viés estrutural da literatura: estudos que encontram efeitos tendem a ser publicados mais do que estudos que não encontram nada. Isso significa que o conjunto publicado provavelmente superestima os efeitos — mais uma razão para desconfiar de números espetaculares e para valorizar replicações independentes.

Não transforme a hierarquia de evidências em pirâmide rígida

Não há um desenho de pesquisa que seja, por definição, "o melhor" para toda pergunta. Pirâmides simplificadas induzem a ideia de que basta localizar uma meta-análise no topo e parar de pensar. Uma meta-análise com poucos estudos, estudos fracos ou pergunta mal delimitada não resolve o problema — e ela herda todos os defeitos dos estudos que sintetiza.

O desenho adequado depende da pergunta, e cada um tem um limite que não se supera com mais amostra:

O ponto é adequação entre pergunta, método e conclusão. Desqualificar um estudo qualitativo por não provar causalidade é tão inadequado quanto usar uma correlação para afirmar causa.

Correlação e causalidade em decisões educacionais

Correlação significa que duas variáveis variam juntas. Causalidade significa que uma mudança em uma variável produz mudança em outra, mantidas as demais explicações sob controle.

O exemplo canônico: consumo de sorvete e afogamentos sobem juntos ao longo do ano. Sorvete não causa afogamento; dias quentes causam os dois.

Quando você encontrar uma correlação, há três explicações alternativas que precisam ser eliminadas antes de qualquer afirmação causal. Vale memorizar as três pelo nome, porque elas aparecem o tempo todo em reuniões pedagógicas.

Uma correlação não é inútil: ela levanta hipóteses, orienta novas perguntas e aponta padrões relevantes. O erro é tratá-la como resposta definitiva sobre causa — e, pior, transformar isso em política obrigatória para todo mundo.

Quando usar dados da própria turma

Quem ensina produz evidências locais o tempo todo: notas, respostas, presença, participação, dúvidas recorrentes, versões de trabalhos e devolutivas. Esses dados são preciosos para ajustar o ensino, mas precisam ser interpretados com humildade.

Use dados da turma para: detectar conceitos que exigem retomada; comparar quais itens geram mais erro; identificar se uma instrução foi entendida; verificar se uma mudança de sequência melhorou o desempenho de maneira consistente; planejar apoio adicional; conversar com estudantes sobre estratégias e progresso.

Evite usar dados locais para: concluir rapidamente que uma técnica é universalmente eficaz; rotular estudantes como incapazes; comparar turmas diferentes sem considerar condições distintas; confundir melhora imediata com retenção de longo prazo; transformar um único indicador em explicação total da aprendizagem.

Quando a evidência parece contrariar sua experiência

Esse é um momento produtivo, não um motivo automático para descartar um dos lados. Um profissional experiente que sente que "isso não bate com o que vejo" está fornecendo informação real — só não está fornecendo, ainda, uma conclusão. Cinco perguntas transformam a sensação em diagnóstico:

1. Minha experiência se refere ao mesmo objetivo e ao mesmo grupo do estudo?
2. A estratégia foi implementada de forma parecida com a do estudo?
3. Há uma característica do meu contexto que altera a decisão?
4. Estou lembrando de casos marcantes e ignorando os demais?
5. A evidência disponível é suficientemente relevante, suficiente e confiável?

A quarta pergunta merece atenção especial, porque a memória profissional não é uma amostra aleatória do que aconteceu. Nós lembramos do aluno que reagiu de forma espetacular a uma técnica e esquecemos dos vinte para quem ela foi indiferente — e a lembrança vívida pesa mais na decisão do que o conjunto invisível.

Às vezes a experiência revela uma condição local que a pesquisa não capturou, e ela vence. Às vezes revela uma prática habitual que merece ser revista, e a evidência vence. O raciocínio baseado em evidências é justamente a disposição de examinar ambos com seriedade, em vez de decidir de antemão qual dos dois ganha.

Um ciclo de decisão que cabe na rotina

1. Defina o problema em termos observáveis. Ex.: estudantes leem, mas não conseguem usar conceitos em questões novas.
2. Especifique a hipótese. Talvez falte prática de recuperação; talvez os exemplos sejam pouco variados; talvez não haja conhecimento prévio suficiente.
3. Busque ou recorde evidência pertinente. O que pesquisas, colegas experientes e dados da turma sugerem?
4. Escolha uma mudança limitada. Ex.: inserir duas perguntas de recuperação no início das próximas aulas e um problema de transferência ao final.
5. Antecipe um indicador — antes de começar. O que contaria como melhora: explicações mais precisas, menos erros em determinado passo, melhor desempenho uma semana depois?
6. Observe e ajuste. Se não funcionou, não conclua automaticamente que a estratégia "não presta". Verifique implementação, adequação, tempo e hipótese inicial.

Esse ciclo preserva rigor sem exigir que cada professor se torne pesquisador em tempo integral. E ele resolve o problema mais comum da "evidência local": a de que, sem um indicador definido de antemão, a gente sempre encontra o que já esperava encontrar.

Caso prático: "meus alunos gostam de vídeos"

Uma equipe percebe que estudantes respondem bem a vídeos curtos e decide substituir boa parte das aulas por uma videoteca. A aceitação é alta; surge a conclusão de que "vídeos funcionam melhor".

Aplique a lente inteira:

• Qual é a afirmação? Não é "os alunos gostam" — isso está medido e é verdade. É "substituir aula por vídeo melhora a aprendizagem". São coisas diferentes.
• Relevância: a evidência disponível é de preferência declarada. Nenhuma medida de retenção ou transferência foi coletada. A evidência não responde à afirmação.
• Comparada a quê? Vídeo contra aula expositiva sem pausas é uma comparação; vídeo contra aula com modelagem, prática guiada e recuperação é outra, muito mais difícil de vencer.
• Para qual função? Vídeo é excelente para demonstrar um procedimento que pode ser pausado e revisto. É fraco para receber devolutiva sobre o próprio raciocínio, porque não há ninguém do outro lado.
• Viés de seleção à espreita: se a equipe comparar quem assistiu aos vídeos com quem não assistiu, estará comparando engajados com não engajados — exatamente o erro do caso da plataforma adaptativa.
• Quem ficou de fora? Acesso à internet, dados móveis, ambiente silencioso em casa, legendas para quem precisa. Um efeito médio positivo pode conviver com um subgrupo prejudicado.

A decisão de qualidade não é "vídeo sim" ou "vídeo não". É: usar vídeo para a função em que ele é forte — demonstração pausável, pré-ensino de vocabulário e ferramenta, retomada espaçada —, integrá-lo a perguntas e tarefas com devolutiva, e medir retenção uma semana depois, não satisfação no mesmo dia.

Roteiro de cinco minutos para uma alegação que chegou até você

Um post, um slide de fornecedor, uma formação paga, uma recomendação de colega. Em ordem:

1. Reescreva a afirmação como frase testável. Quem faz o quê, produz qual efeito, em quem, comparado a quê?
2. Localize a medida. O que exatamente foi medido, com qual instrumento, quanto tempo depois?
3. Pergunte pelo grupo de comparação. Existe? Como foi formado? Sorteio ou escolha?
4. Procure as três alternativas. Confundimento, causalidade reversa, viés de seleção — alguma delas explica o resultado sem a causa alegada?
5. Pergunte pelo tamanho, não pelo percentual. Qual o efeito padronizado? Qual o custo? Comparado à melhor alternativa que já temos?
6. Calibre pela decisão. Quanto custa errar, e quão reversível é? Ajuste a exigência de evidência ao tamanho da aposta.

Se você só conseguir fazer duas perguntas, faça a 2 e a 3. Elas sozinhas derrubam a maior parte das alegações frágeis que circulam.

Pergunta 3 de 5

Um fornecedor apresenta um estudo mostrando que 92% dos participantes avaliaram positivamente o novo curso on-line e conclui que a plataforma 'melhora a aprendizagem'. Qual critério essa evidência falha primeiro?

Veracidade: o estudo certamente foi fraudado pelo fornecedor.Suficiência: um único estudo nunca pode apoiar nenhuma conclusão.Relevância: o resultado medido é satisfação, e a afirmação é sobre aprendizagem.Nenhum: 92% é um percentual alto o bastante para sustentar a conclusão.

Cinco casos: o que deveria ter sido feito e o que não poderia ter sido feito

Cada caso abaixo é uma situação realista com desenlace ruim. Para cada um, o que a análise desta aula recomenda e o que ela proíbe.

Pergunta 4 de 5

Segundo a definição original de prática baseada em evidências (Sackett et al., 1996), qual afirmação está correta?

A evidência externa substitui o julgamento profissional, que é fonte de viés.A prática consiste em integrar a experiência profissional individual com a melhor evidência externa disponível.Só ensaios controlados randomizados contam como evidência aceitável para decidir.A experiência profissional basta quando o profissional tem muitos anos de atuação.

Pergunta 5 de 5

Você tem 50 minutos e um conteúdo com muitos elementos interdependentes, numa turma cujo conhecimento prévio você não conhece. Qual sequência é mais coerente com esta aula?

Propor um projeto aberto logo no início, para que a turma descubra sozinha o que precisa saber.Explicar tudo sem parar e deixar todas as perguntas para os últimos cinco minutos.Sondar um pré-requisito, explicar um bloco pequeno com exemplo, modelar, praticar com apoio e fechar com recuperação sem consulta.Reduzir o conteúdo pela metade e substituir a parte cortada por uma dinâmica de integração.

Recuperação e próximo passo

Recupere da memória

Sem consultar: cite os três critérios para julgar uma afirmação baseada em evidências e dê um exemplo de falha para cada um.

Escreva a resposta antes de conferir. Se você conseguiu os três critérios mas travou nos exemplos, o conceito está disponível e a aplicação ainda não — retome os três cartões da Parte III.

Conferir resposta

Seu próximo passo concreto. Escolha uma aula, formação ou palestra que você ministrará em breve. Não a reconstrua inteira. Faça somente isto:

1. Escreva em uma frase o que a pessoa deverá conseguir fazer ao final.
2. Liste três elementos que ela terá de processar.
3. Identifique um pré-requisito que pode faltar.
4. Acrescente um exemplo ou modelo antes da atividade.
5. Inclua uma pergunta de recuperação ao final e outra na próxima oportunidade.

Se esse pequeno redesenho produzir respostas mais claras, erros mais diagnosticáveis ou maior capacidade de aplicação, você terá um ponto concreto para aprofundar o trabalho.

Fontes

• Cowan, N. (2001). The magical number 4 in short-term memory: A reconsideration of mental storage capacity. Behavioral and Brain Sciences, 24(1), 87–114. doi:10.1017/S0140525X01003922
• Chi, M. T. H., Feltovich, P. J., e Glaser, R. (1981). Categorization and representation of physics problems by experts and novices. Cognitive Science, 5(2), 121–152. doi:10.1207/s15516709cog0502_2
• Stanovich, K. E. (1986). Matthew effects in reading: Some consequences of individual differences in the acquisition of literacy. Reading Research Quarterly, 21(4), 360–407. doi:10.1598/RRQ.21.4.1
• Roediger, H. L., e Karpicke, J. D. (2006). Test-enhanced learning: Taking memory tests improves long-term retention. Psychological Science, 17(3), 249–255. doi:10.1111/j.1467-9280.2006.01693.x
• Dunlosky, J., Rawson, K. A., Marsh, E. J., Nathan, M. J., e Willingham, D. T. (2013). Improving students' learning with effective learning techniques. Psychological Science in the Public Interest, 14(1), 4–58. doi:10.1177/1529100612453266
• Cepeda, N. J., Pashler, H., Vul, E., Wixted, J. T., e Rohrer, D. (2006). Distributed practice in verbal recall tasks: A review and quantitative synthesis. Psychological Bulletin, 132(3), 354–380. doi:10.1037/0033-2909.132.3.354
• Sackett, D. L., Rosenberg, W. M. C., Gray, J. A. M., Haynes, R. B., e Richardson, W. S. (1996). Evidence based medicine: what it is and what it isn't. BMJ, 312(7023), 71–72. doi:10.1136/bmj.312.7023.71
• Kraft, M. A. (2020). Interpreting effect sizes of education interventions. Educational Researcher, 49(4), 241–253. doi:10.3102/0013189X20912798
• Dekker, S., Lee, N. C., Howard-Jones, P., e Jolles, J. (2012). Neuromyths in education: Prevalence and predictors of misconceptions among teachers. Frontiers in Psychology, 3, 429. doi:10.3389/fpsyg.2012.00429
• Alfieri, L., Brooks, P. J., Aldrich, N. J., e Tenenbaum, H. R. (2011). Does discovery-based instruction enhance learning? Journal of Educational Psychology, 103(1), 1–18. doi:10.1037/a0021017
• Sweller, J., van Merriënboer, J. J. G., e Paas, F. (2019). Cognitive architecture and instructional design: 20 years later. Educational Psychology Review, 31, 261–292. doi:10.1007/s10648-019-09465-5

Dúvida sobre qualquer passo desta aula? Pergunte — este material foi escrito para ser interrogado, não apenas lido. Continue em Aula 2 — Carga intrínseca, extrínseca e germane, ou consulte o glossário e os checklists.