Por Robert E. Slavin, Johns Hopkins University
Quando você está doente, você procura medicamentos e tratamentos rigorosamente avaliados?
Quando você compra um carro, você espera que tenha sido rigorosamente testado quanto à segurança?
Você apoia a investigação na agricultura para aumentar a oferta e a qualidade dos alimentos saudáveis para o mundo?
Quase todos diriam que prefeririam receber serviços médicos comprovados, comprar produtos seguros e eficazes, viajar em trens seguros e aviões, e assim por diante. A evidência desempenha um papel central na agricultura, onde práticas comprovadas, sementes, estoque e práticas veterinárias aumentaram enormemente a produtividade, reduziram os custos e melhoraram o acesso e a qualidade dos alimentos em todo o mundo.
No entanto, na educação, a evidência tem desempenhado um papel mínimo na prática. O creme de acne de um adolescente teve que provar sua segurança e eficácia. Então, por que o currículo da álgebra não é examinado do mesmo modo? Pode-se argumentar que o rápido ritmo de progresso em áreas como medicina, agricultura e tecnologia tem muito a ver com o respeito pela evidência nesses campos, enquanto o lento ritmo de progresso na educação reflete o contrário.
Claro, há uma grande pesquisa em educação e psicologia educacional, e os princípios derivados dessa pesquisa influenciam a prática. No entanto, a pesquisa para apoiar (ou refutar) os princípios gerais de prática, embora essencial, não orienta os educadores na escolha de textos, programas, softwares ou metodologias particulares. Até que a pesquisa suporte diretamente abordagens particulares, é provável que os educadores escolham as partes do conhecimento recebido e ignorem o resto. Isso é melhor do que ignorar a pesquisa inteiramente, mas não conduz à adoção progressiva de estratégias cada vez mais efetivas, como é a norma em medicina, agricultura, tecnologia e outros campos induzidos por evidências.
Nos últimos anos, o campo da educação começou a assumir um papel mais central na evidência na prática educacional e nas decisões. Este movimento é chamado de Prática Baseada em Evidências, ou EBP. Brian Cook apresentou recentemente esse tópico e definiu alguns dos termos fundamentais. Minha intenção é dar um passo adiante, discutir como a prática baseada em evidências está começando a transformar a prática educacional e a psicologia educacional – e como, como o presidente Karen Harris sugere, podemos realmente "impactar a educação pré-K para o cinza".
O que é considerado "Pesquisa rigorosa"?
Um dos principais requisitos da prática baseada em evidências é um conjunto grande e robusto de programas e práticas com "evidências rigorosas de eficácia". O que significa isso varia em diferentes circunstâncias, mas o "padrão-ouro" de evidência baseada em evidências A prática é o ensaio clínico randomizado, ou RCT (Shadish, Cook, & Campbell, 2002). Em um RCT, estudantes, professores ou escolas que concordam em participar de um experimento são atribuídos aleatoriamente para experimentar um determinado tratamento ou para servir como grupo controle (muitas vezes, aqueles no grupo controle recebem o tratamento após o término do estudo ). Normalmente, os alunos nos grupos experimental e de controle são previamente testados antes do início do programa e, posteriormente, testados uma ou mais vezes. Os pós-testes são então comparados estatisticamente, controlando pré-testes e possivelmente outros fatores.
A beleza do RCT é essa – por causa da atribuição aleatória – os grupos experimentais e de controle podem ser considerados iguais no pré-teste não apenas em fatores observáveis, como pré-testes, mas também em fatores não observáveis, como motivações ou orientações. Portanto, se os resultados diferirem significativamente no final da experiência, a diferença deve ser devida ao tratamento.
Pragmicamente, os RCTs podem ser difíceis de implementar. Muitas vezes, é difícil conseguir que alunos, professores e líderes escolares concordem em ser atribuídos aleatoriamente. Como os alunos são ministrados nas escolas e nas aulas, é difícil atribuir alunos de escolas e aulas aleatoriamente, com exceção de tratamentos individuais, como aulas particulares. Portanto, classes ou escolas são freqüentemente atribuídas aleatoriamente nos chamados ensaios randomizados de cluster (CRTs). Estes preservam a base grupal do ensino, mas tais experimentos tipicamente exigem muitas escolas – geralmente cerca de 25 por tratamento – para os métodos que levam em consideração o cluster.
Os projetos de pesquisa padrão que são geralmente aceitáveis em práticas baseadas em evidências incluem quase-experimentos (QEDs), em que os grupos experimentais e de controle são comparados antecipadamente em fatores como pré-testes e dados demográficos em vez de serem atribuídos aleatoriamente. Uma variação disso é o que eu chamo de quase-experiência aleatorizada (RQE), em que os grupos são aleatoriamente designados para tratamentos, mas há poucos grupos para permitir o uso de estatísticas que levam o cluster em consideração.
E quanto à pesquisa além dos ECR?
O movimento de prática baseado em evidências valoriza todos os tipos de pesquisa: correlacional, etnográfica e descritiva, bem como experimental. A sua insistência em RCT aplica-se apenas a questões de "o que funciona". Por exemplo, se você quer saber se um determinado programa de ciências aumenta a conquista da ciência mais do que a prática comum, uma experiência é essencial. No entanto, para outras questões, outros métodos podem ser preferidos. Muitos RCTs também usam métodos qualitativos para caracterizar o que as aulas experimentais e de controle estavam fazendo e como estudantes e professores percebiam os tratamentos.
Adicionando Programas Comprovados
O progresso mais rápido na reforma baseada em evidências envolveu o desenvolvimento e avaliação de programas em todos os níveis de educação, especialmente pré-K a 12. Sob financiamento do Instituto de Ciências da Educação (IES), National Science Foundation (NSF) e outras agências, vários programas foram suportados. Nos últimos anos, o programa Investir na Inovação (i3) da administração Obama investiu mais de US $ 1,5 bilhão em desenvolvimento, validação e ampliação de programas comprovados. Um total de 143 programas foram financiados até agora. No Reino Unido, o Fundo de Doação para Educação (EEF) está fazendo investimentos similares.
O que IES, NSF, i3 e EEF estão descobrindo é que não é tão fácil melhorar a realização dos alunos, mas pode ser feito. A maioria dos programas financiados não produz diferenças significativas, mas a minoria que tem enorme potencial para transformar prática e política educacional porque suas descobertas são geralmente obtidas em contextos escolares realistas e podem (em princípio) ser replicadas de forma ampla.
Resultados resumidos
A fim de tornar as descobertas de pesquisas rigorosas facilmente disponíveis e fáceis de interpretar, é importante ter revisões que utilizem padrões consistentes e justos para resumir a evidência. Na educação, o Departamento de Educação dos EUA mantém o What Works Clearinghouse (http://ies.ed.gov/NCEE/wwc). Nosso grupo da Universidade Johns Hopkins produz a Enciclopédia de Melhor Evidência, ou BEE (www.bestevidence.org). Recentemente, o Regulamento Administrativo Geral do Departamento de Educação (EDGAR) criou definições de evidências moderadas e fortes de eficácia para programas educacionais.
A prática baseada em evidências que afeta a política e a prática educacionais?
O movimento de prática baseado em evidências está apenas começando a afetar a prática educacional além das escolas que participam da pesquisa em si. No entanto, isso pode estar mudando.
Uma área de impacto é i3. Para que os programas recebam maiores bolsas de validação e ampliação, eles são obrigados a mostrar evidências de eficácia. Coletivamente, esses programas têm servido milhares de escolas.
Outra área de desenvolvimento de impacto são as Subsídios federais de melhoria escolar (SIG), que apoiam a transformação das escolas de menor desempenho em cada estado. A legislação recente definiu uma nova categoria que as escolas poderiam escolher: programas comprovadamente comprovados em toda a escola. Será interessante ver quantas escolas fazem essa escolha.
Incentivos para usar programas comprovados estão aparecendo em muitas partes da legislação federal. Por exemplo, nas propostas do Título II SEED, os candidatos devem apresentar provas para seus programas.
A política pode intervir, mas ao longo do tempo parece provável que os requisitos de evidências se tornem cada vez mais comuns nas políticas federais, estaduais e locais.
Como a prática baseada em evidências afetará a psicologia educacional?
Eu acredito que a prática baseada em evidências será muito boa para toda a pesquisa educacional e psicologia educacional. Se ele se apropriar da política e da prática, isso aumentará o interesse na pesquisa por educadores, formuladores de políticas e financiadores em todos os níveis. A força da prática baseada em evidências em medicina não apenas aumenta o interesse e o financiamento de ECA, mas também suporta uma vasta gama de pesquisas usando todos os tipos de métodos. O mesmo pode acontecer na educação.
A educação é um campo aplicado. O governo, os educadores e o público se preocupam com os resultados da educação, e eles são muito mais propensos a se preocupar com (e financiar) a pesquisa e o desenvolvimento da psicologia educacional quando podem ver os impactos nas crianças.
Há uma ampla controvérsia legítima na psicologia educacional sobre métodos de pesquisa, medidas e propósitos de pesquisa. Este debate é saudável e necessário. No entanto, se você considerar que o objetivo da psicologia educacional como disciplina é melhorar a educação, especialmente para crianças em risco, então o movimento de prática baseado em evidências oferece esperanças reais de tornar nosso campo mais impactante para as crianças. Não é isso o que importa?
Esta publicação é a final de uma série especial contribuída em resposta ao tema presidencial da Divisão 15 da Karen R. Harris, "Impacting Education Pre-K to Grey". O presidente Harris enfatizou a importância de impactar a educação mantendo e enriquecendo as maneiras pelas quais A pesquisa de Psicologia Educacional melhora e impacta a educação em todas as idades. Esse impacto depende do tratamento de pontos de vista concorrentes com consideração e respeito, permitindo assim um trabalho colaborativo, transversal / interdisciplinar que aproveita o que sabemos de diferentes pontos de vista. Ela também argumentou que precisamos estabelecer distúrbios de paradigma e rejeitar falsas dicotomias à medida que analisamos a pesquisa para publicação ou financiamento, desenvolvemos a próxima geração de pesquisadores, apoiamos pesquisadores de carreira precoce e trabalhamos uns com os outros e o campo maior.
Referências
Shadish, WR, Cook, TD, & Campbell, DT (2002). Desenhos experimentais e quase experimentais para inferência causal generalizada. Boston: Houghton-Mifflin.
