A pesquisa educacional com apoio federal não precisa ser refeita

Estes são tempos interessantes para a pesquisa educacional.

Por um lado, o campo amadureceu a ponto de a pesquisa educacional de alta credibilidade parecer ser publicada semanalmente, às vezes diariamente. O investimento federal e a infraestrutura contribuíram para um aumento notável na oferta de estudos rigorosos amplamente disponíveis para educadores e legisladores.

Mas agora, alguns sugeriram que os bilhões de dólares investidos em pesquisa educacional por agências federais, incluindo o Instituto de Ciências da Educação (IES) e a Fundação Nacional de Ciências (NSF), não causaram impacto. [eu]



Essa falha, prossegue o argumento, remete a um sistema de produção de pesquisa que é administrado por e para pesquisadores acadêmicos e atende principalmente às suas necessidades e interesses. Os estudos demoram muito e custam muito dinheiro. Os tomadores de decisão estaduais e locais consideram os produtos desta pesquisa irrelevantes para suas necessidades. E há poucos exemplos de onde a pesquisa ajudou os educadores a traçar um curso melhor. Em suma, toda a empresa carece de uma teoria de ação convincente que explique adequadamente a natureza fracamente acoplada do sistema educacional americano.

Este diagnóstico sombrio está certo? É realmente verdade que os formuladores de políticas e profissionais da educação desconsideram a pesquisa? A infraestrutura federal de pesquisa e divulgação em educação está desconectada do que está acontecendo nas salas de aula e nos campi?

quantas pessoas vão votar no trunfo

Na verdade, pesquisa educacional é usado por educadores

Os dados de uso não combinam com o retrato sombrio da pesquisa educacional que alguns apresentaram - pelo menos no que diz respeito ao tipo de pesquisa que busca desenvolver intervenções eficazes com financiamento de agências federais. Embora ninguém argumente seriamente que o uso eficaz de pesquisa de alta qualidade é uma prática padrão no setor de educação, pode-se argumentar que o interesse e a familiaridade dos educadores com a pesquisa nunca foram tão fortes. Também estão crescendo as oportunidades para líderes distritais e estaduais de educação fazerem parcerias estreitas com pesquisadores para estabelecer prioridades de pesquisa, planejar e conduzir estudos e interpretar resultados. Esse crescimento foi impulsionado principalmente por grandes investimentos federais em parcerias de pesquisa-prática em educação nos últimos cinco anos.

Se há um problema com a produção de pesquisa em educação, é que o campo carece de financiamento ou número suficiente de pesquisadores altamente capazes necessários para atender à demanda atual de profissionais e legisladores por mais e melhores evidências do que funciona na educação. Considerando que o mercado de evidências tem crescido, as melhorias no fornecimento e na comunicação de pesquisas não são suficientes para incentivar o tipo de demanda que faria com que todos os distritos escolares verificassem regularmente o What Works ClearinghouseTM(WWC) para os relatórios de intervenção mais recentes. O Every Student Succeeds Act (ESSA), a reautorização do Elementary and Secondary Education Act, pode aumentar a demanda por meio de seus requisitos de que estados, distritos e escolas avaliem as evidências ao selecionar intervenções. A esta altura, entretanto, não está claro como isso se desdobrará, particularmente com o reduzido papel federal na prestação de contas.

Neste contexto, onde alavancas políticas poderosas para aumentar a demanda estão amplamente ausentes, a abordagem de investimento do IES se concentra em fornecer um fornecimento constante de conhecimento científico novo e generalizável sobre a eficácia das abordagens na educação. O IES também prioriza a promulgação de padrões rigorosos (que podem orientar as decisões estaduais e locais sobre as evidências sob a ESSA), ampla disseminação dos resultados da pesquisa e atividades direcionadas de capacitação com funcionários de agências de educação locais e estaduais, inclusive por meio de parcerias de pesquisa-prática.

O interesse do IES em apoiar a produção de conhecimento generalizável precisa ser sublinhado. Com relação ao investimento federal, mesmo a ciência local - isto é, questões e estudos gerados localmente - deve contribuir para uma base de conhecimento mais ampla que possa informar as decisões de estados e distritos que não fizeram parte do estudo. As descobertas da ciência local não devem permanecer locais; em vez disso, eles precisam ser capturados em um sistema que pode torná-los disponíveis para qualquer pessoa que queira aprender com eles. Uma parte importante da função federal é fornecer a infraestrutura para capturar as descobertas dos estudos de impacto, incluindo aqueles de esforços conduzidos localmente, e tornar essas descobertas amplamente disponíveis.

Quem usa a pesquisa educacional, afinal?

Um desafio para o campo da pesquisa em educação tem sido entender se e como a pesquisa está sendo usada na tomada de decisões em educação. Os estudos sobre o uso da pesquisa têm sido em pequena escala e dificultados pela falta de boas medidas. Mas os esforços recentes para mapear sistematicamente a dinâmica do uso da pesquisa em agências de educação locais e estaduais forneceram novas e talvez surpreendentes percepções.

Em uma pesquisa da primavera de 2015, o Centro Nacional de Pesquisa em Políticas e Práticas (NCRPP) - um dos dois centros de Pesquisa e Desenvolvimento apoiados pelo IES focado em compreender como a pesquisa educacional é usada por profissionais e legisladores - descobriu que o uso de pesquisa auto-relatado foi alto e baixo ceticismo em relação à pesquisa entre 271 funcionários do escritório central dos 32 maiores distritos escolares do país. [ii]

Grande parte dos entrevistados na pesquisa NCRPP relataram que usam a pesquisa com frequência ou o tempo todo para tomar decisões sobre intervenções de compra (85 por cento), adoção de currículos (78 por cento), projeto de desenvolvimento profissional (78 por cento), redesenho de programas (77 por cento ), ou ampliando os programas (70 por cento). Os entrevistados concordaram em sua esmagadora maioria ou concordaram fortemente que a pesquisa em educação ajudou a identificar soluções para os problemas enfrentados pelas escolas (99 por cento) e que os pesquisadores em educação forneceram um serviço valioso aos profissionais (95 por cento). Sessenta e um por cento poderiam citar uma pesquisa que foi útil para seu trabalho no ano anterior.

Para ter certeza, a pesquisa indicou espaço para melhorias. Metade dos entrevistados viu uma desconexão entre a pesquisa em educação e as práticas e políticas de educação. E é certamente verdade que os incentivos acadêmicos se alinham mal aos do sistema educacional. Esse desalinhamento torna alguns tipos de pesquisa (como a conduzida em parcerias de pesquisa-prática) pouco atraentes para alguns tipos de pesquisadores (como professores pré-titulares). Mas, em geral, os requisitos de erudição e prática existem em tensão criativa, cada um com algo importante a contribuir - uma questão que discuto mais adiante neste artigo.

Na verdade, sabemos e usamos coisas da pesquisa educacional

À medida que aumenta o número de intervenções avaliadas com rigor, mais distritos escolares e estados estão implementando programas com evidências de impacto. Por exemplo, o Blocos de construção O currículo, que mostrou efeitos positivos nas habilidades matemáticas e de alfabetização de crianças pequenas, foi desenvolvido e testado com o apoio da NSF e do IES. Este currículo foi recentemente adotado em toda a cidade por Boston, Nova York e vários distritos da Califórnia. Outro exemplo é a avaliação financiada pelo IES do Early College High Schools da Carolina do Norte, que encontrou efeitos positivos na conclusão dos cursos preparatórios para a faculdade e na frequência escolar dos alunos, entre outros resultados. Com base nessas descobertas, a Carolina do Norte está expandindo o programa em todo o estado com uma concessão Federal Investing in Innovation (I3). O IES também apoiou o desenvolvimento do programa Early Literacy Skills Builder, que demonstrou melhorar os resultados de leitura para alunos com deficiência intelectual significativa e atualmente é usado em cerca de 1.300 distritos escolares.

como a inflação estimula a especulação

Estudos financiados pelo IES e outros identificaram práticas eficazes que podem ser implementadas em salas de aula sem a aquisição de um programa ou currículo específico. Essas práticas estão resumidas nos guias de prática do WWC, que agora são 18. O WWC começou a atualizar os guias mais antigos porque a pesquisa na última década forneceu mais informações sobre práticas eficazes.

Estudos rigorosos também forneceram evidências sobre programas populares que fazem não produzir os resultados esperados. O IES foi um dos primeiros financiadores de avaliações de impacto rigorosas na educação pós-secundária, apoiando grandes testes em vários locais de comunidades de aprendizagem e programas de ponte de verão voltados para alunos que precisam de educação para o desenvolvimento. Essas avaliações mostraram melhorias modestas nos resultados da educação de desenvolvimento, mas nenhum impacto significativo sobre a obtenção de créditos de nível universitário ou persistência. Uma nova geração de intervenções de educação para o desenvolvimento surgiu - e agora está sendo testada - em resposta a essas descobertas.

A ciência local serve a um propósito importante

Nos últimos cinco anos, o IES fez grandes apostas de que as parcerias de pesquisa-prática (RPPs) produzirão pesquisas úteis e de alta qualidade e aumentarão o compromisso e a habilidade dos funcionários das agências de educação locais e estaduais para consultar pesquisas rotineiramente. Esse investimento não significa que os pesquisadores que trabalham fora do contexto dos RPPs não sejam bons parceiros; na verdade, a pesquisa sobre intervenções em sala de aula ou na escola muitas vezes não seria possível sem a colaboração e a visão profissional do pessoal da escola. Mas, em contraste com as bolsas de pesquisa tradicionais do IES, os RPPs têm um objetivo primário explícito de aumentar a capacidade dos parceiros de educação para gerar e aplicar pesquisas de forma eficaz.

O primeiro grande investimento do IES em RPPs foi por meio dos 10 contratos do Laboratório Educacional Regional (REL) que começaram em 2012. Os RELs estão autorizados a conduzir pesquisas aplicadas, fornecer suporte técnico e oferecer oportunidades para aprender sobre os resultados da pesquisa. Os RELs de 2012 trabalharam com cerca de 80 RPPs (conhecidos como alianças de pesquisa ), cada um dos quais tem um tópico específico e uma meta educacional que requer pesquisa educacional para ser alcançada.

As alianças de pesquisa apoiadas pelos RELs variam em sua composição (por exemplo, apenas funcionários do estado; funcionários de vários distritos) e o nível de conforto inicial dos participantes com a pesquisa. Algumas alianças de pesquisa começaram com inventários de dados, passaram para pesquisas descritivas usando dados administrativos e examinaram pesquisas de impacto conduzidas em outros lugares para identificar intervenções - incluindo aquelas com estudos revisados ​​pelo WWC - que podem funcionar em seu contexto. Várias alianças estão conduzindo seus próprios estudos de impacto, incluindo ensaios controlados randomizados de retorno rápido. Trabalhando com os membros da aliança, os RELs desenvolveram ferramentas, guias, resumos de pesquisas, vídeos e séries de webinars novos e úteis - todos os quais começaram com interesses locais, mas têm como objetivo beneficiar educadores em todo o país. Aqueles que dispensam o papel dos RELs na infraestrutura de capacitação e disseminação do IES, muitas vezes têm uma compreensão incompleta dos novos rumos que o programa tomou nos últimos quatro anos.

Os dois componentes do IES que financiam pedidos de bolsas de pesquisa - o Centro Nacional de Pesquisa em Educação e o Centro Nacional de Pesquisa em Educação Especial - apoiam muitas bolsas que exigem parcerias formais entre pesquisadores e funcionários da agência. Isso inclui bolsas no âmbito do programa de parceria pesquisador-profissional, que apoiou 28 parcerias em todo o país; 22 avaliações em grande escala de programas e políticas estaduais e locais; e um novo programa para estudos de baixo custo e curta duração, que anunciará seus primeiros prêmios nesta primavera. Essas bolsas compartilham duas características críticas: (1) o programa ou questão sob investigação é aquele que os funcionários da educação identificaram como uma prioridade e (2) um membro da equipe da agência de educação é nomeado para co-liderar o estudo com um pesquisador independente. O investimento em RPPs financiados por doações e avaliações estaduais-locais está perto de US $ 100 milhões desde que os primeiros subsídios foram concedidos em 2009, e está crescendo continuamente.

As bolsas de formação de pré-doutorado e pós-doutorado financiadas por esses mesmos dois centros de pesquisa em educação do IES agora enfatizam explicitamente a preparação de novos pesquisadores com as habilidades e experiências de que precisarão para trabalhar de forma produtiva com profissionais e legisladores. O IES recomenda que os pré-doutorandos concluam um estágio em uma agência de educação local ou estadual.

No National Center for Education Statistics, as bolsas de 2015 do State Longitudinal Data Systems (SLDS) buscam incentivar o uso desses sistemas para pesquisa e avaliação. As concessões do SLDS são feitas diretamente aos estados. Uma grande parte dos 16 estados que receberam subsídios do SLDS em 2015 farão avaliações usando seus sistemas de dados e, juntos, esses 16 estados receberão aproximadamente US $ 100 milhões para esse trabalho. Isso fornecerá um teste para verificar se o tipo e a qualidade da pesquisa são diferentes quando os países, e não os pesquisadores, são os beneficiários da bolsa.

Também deve ser dito que, apesar do grande entusiasmo atual pelos RPPs, há muito que não sabemos sobre se e em que circunstâncias essas parcerias contribuem para uma incorporação mais cuidadosa da pesquisa na tomada de decisão, e se os custos disso abordagem são proporcionais à capacidade construída e à quantidade e qualidade da pesquisa gerada.

O excepcionalismo local é um beco sem saída

Um dos argumentos dos RPPs é que os líderes educacionais consideram os estudos conduzidos com seus próprios dados mais convincentes do que os estudos conduzidos com professores ou alunos de outra pessoa. Este é um argumento convincente: a luz brilhante dos próprios dados pode dissipar os mitos sobre a gravidade de um problema (ou não), quais alunos são afetados e se as linhas de tendência estão indo na direção certa. A análise descritiva dos dados locais é uma base para identificar se e onde a intervenção é necessária e é um empreendimento comum dos RPPs.

Mas devemos encorajar os líderes educacionais locais a estudar se uma intervenção funciona com seus próprios dados, mesmo quando estudos rigorosos dessa intervenção já foram conduzidos em outro lugar? Dados os recursos infinitos e a capacidade local, a resposta pode ser sim, desde que os resultados do estudo possam ser combinados: mais estudos de uma intervenção fornecem uma imagem melhor de se, quando e para quem uma intervenção funciona.

No entanto, os recursos para pesquisa em educação são relativamente escassos. O capital financeiro e humano disponível é insuficiente para que cada estado e distrito realize seus próprios estudos de impacto.

Mesmo além da questão dos recursos, há boas razões para não ceder ao excepcionalismo local no que diz respeito a aprender o que funciona na educação. Imagine se todo hospital exigisse estudar por si mesmo se um determinado procedimento era eficaz, apesar das conclusões firmes de estudos anteriores. Toleraríamos profissionais médicos que estariam convencidos do valor de um procedimento apenas se um estudo fosse conduzido em seus próprios contextos e em seus próprios pacientes? Algum de nós, como paciente, pediu a nossos médicos que fornecessem evidências locais de que um tratamento prescrito funciona?

No novo ambiente político criado pela ESSA, onde os estados e distritos são obrigados a examinar o impacto das intervenções que estão considerando, um desafio principal será apoiar esses líderes educacionais a avaliarem cuidadosamente o que podem aprender com pesquisas conduzidas por outras pessoas em outros lugares. Todas as pesquisas de impacto - mesmo aquelas conduzidas em seu próprio contexto - são sobre o que funcionou no passado. Esta pesquisa não faz promessas sobre resultados futuros em qualquer contexto. Seu papel é ajudar os educadores a fazer melhores apostas sobre o que provavelmente funcionará no futuro.

A bolsa de estudos não é o vilão

Na busca por engajar o pessoal da educação estadual e local mais plenamente na pesquisa, existe o perigo de colocar os pesquisadores como pecadores e o pessoal das agências de educação como os santos - ou pelo menos os que foram contra os pecados. Quem poderia ter perguntas melhores sobre a prática ou política educacional, pode-se perguntar, do que os próprios funcionários da agência? Além disso, dados os problemas de educação que enfrentamos, pode a infraestrutura federal de pesquisa educacional dar-se ao luxo de apoiar pesquisadores que - entre suas outras atividades - construam teorias, ajustem suas medidas e modelos, desenvolvam e debatam terminologia precisa e escrevam para periódicos acadêmicos?

Em resposta, pergunto se podemos não fazer isso.

Deixe-me ser claro. O IES apóia a pesquisa que se destina a produzir benefícios práticos para a educação, muitas vezes por meio do desenvolvimento e teste de novas estratégias instrucionais, práticas de sala de aula, materiais de aprendizagem, incentivos, rotinas organizacionais e sistemas. O caminho para esses benefícios práticos, entretanto, geralmente passa pelo trabalho acadêmico cuidadoso de desenvolver e expandir construções, medidas, estruturas e teorias. Este trabalho é transmitido por meio de publicações acadêmicas e conferências a outros pesquisadores que, na rotina de seu trabalho acadêmico, fazem novos refinamentos e extensões. Essas atividades podem não ser de grande interesse ou benefício imediato para a maioria dos funcionários das agências de educação e provavelmente não serão realizadas no contexto de RPPs. Mas, em última análise, essas atividades acadêmicas ajudam a organizar percepções e pesquisas - incluindo, sem dúvida, as de futuros RPPs - e sugerem novas abordagens para melhorar a prática.

Além disso, uma estratégia de investimento saudável para gerar benefícios práticos em educação tem espaço para perguntas feitas por membros de agências de educação e por pesquisadores externos que podem estar em melhor posição para levantar questões que podem ser perturbadoras e desconfortáveis. Todo sistema precisa de novas ideias e perguntas que vêm de fora, além daquelas geradas de dentro.

Abordagem de investimento do IES

À medida que a complexidade e o desafio de unir pesquisa, política e prática em educação se tornam mais claros, a estratégia de investimento do IES evolui. A abordagem atual atinge um equilíbrio entre apoiar os esforços de pesquisa que requerem uma parceria local significativa no desenvolvimento de questões e implementação de estudos, incluindo RPPs, e aqueles que exigem menos. Os investimentos em pesquisa do IES produziram práticas e intervenções que são utilizáveis ​​e amplamente utilizadas. Dado este histórico e o fato de que o júri ainda não decidiu até que ponto os RPPs contribuirão para o conhecimento generalizável e a construção de capacidade, esta abordagem equilibrada parece bem justificada.

o mundo em 2020 economista cobre

Ao mesmo tempo, o IES continua apoiando uma infraestrutura de pesquisa e dados que inclui a formação de novos pesquisadores cada vez mais familiarizados com o mundo da prática educacional; expansão e uso de sistemas estaduais de dados longitudinais para avaliação; uma fonte central de sínteses de resultados de estudos de impacto; e um sistema em rede para distribuição e envolvimento com resultados de pesquisas de alta qualidade em todas as regiões do país. Essa infraestrutura alavanca investimentos adicionais em avaliação por meio da estratégia mais ampla do Departamento de Educação de incorporar requisitos de evidências em seus programas de subsídios discricionários, dos quais I3 é o exemplo mais notável.

A impaciência é compreensível. No entanto, criar um sistema educacional mais baseado em evidências é um longo, longo jogo. Nem todas as peças ainda estão no lugar. Precisaremos de um pensamento criativo continuado sobre como unir pesquisa, política e prática. Mas vale a pena lembrar o quanto avançamos desde 2002, quando a criação do IES anunciou o desenvolvimento de uma nova infraestrutura federal de pesquisa em educação. Com essa infraestrutura instalada, geramos pesquisas de relevância imediata, bem como uma base sólida para fazer mais melhorias na forma como conectamos a pesquisa à política e à prática.

Ruth Curran Neild é a Diretora Adjunta de Política e Pesquisa, Delegou as Funções de Diretora do Instituto de Ciências da Educação do Departamento de Educação dos EUA.



[eu] Kane, Thomas J. (2016). Conectando-se à prática: como podemos colocar a pesquisa em educação para funcionar. Próxima Educação, 16 (dois), 81-86.

[ii] http://ncrpp.org/assets/documents/NCRPP_Research-Use-in-Largest-Districts.pdf .