Desconstruindo Union City

Há algum tempo, li um relato jornalístico sobre uma pequena ilha perto da Itália na qual as pessoas vivem até uma idade avançada. Será porque eles dormem até tarde, ou bebem muito vinho, ou vivem uma existência comunal, ou não comem açúcar refinado? Infelizmente, não há como saber, com base nas informações fornecidas no artigo, se é uma ou mais das características do estilo de vida que o autor identificou como distintas, ou se algo mais está acontecendo. Mesmo a alegação de longevidade incomum é questionável, uma vez que não há registro de nascimento. E levando tudo em consideração, talvez existam outros lugares na Itália onde as pessoas vivam tanto ou mais tempo com estilos de vida diferentes. Mas era uma boa história, no entanto.

Houve muitas histórias boas no Education Nation, o talkfest anual da NBC / Universal do qual participei na semana passada. Minha favorita era Goldie Hawn (a ex-atriz cuja carreira foi construída interpretando loiras idiotas) defendendo a neurobiologia de salas de aula seguras. De alguma forma, ouvir Goldie falar sobre a amígdala foi chocante, mas talvez seja só eu.

Não tão chocante, mas o melhor alimento para esta peça foi David Kirp, com quem fiz par em um painel de discussão do que é preciso para produzir um ótimo distrito escolar. David expôs as ideias em seu livro recente, Eruditos improváveis . Sua história é inspirada no ano em que ele passou observando as escolas em Union City, New Jersey.



De acordo com a sinopse da editora para o livro, Union City oferece um manual de reforma que mudará drasticamente nossa abordagem para reviver a educação pública. O manual inclui uma boa pré-escola, um currículo exigente que ensina a pensar e não a fazer o teste, o envolvimento dos pais, o apoio aos professores, um ambiente atencioso com grandes expectativas e a paciência de esperar melhorias graduais. Nas palavras de David, não há entusiasmo. As escolas com baixo desempenho não foram fechadas, os professores não foram demitidos. Não há recrutas da Teach for America, escolas charter ou líderes carismáticos. A tecnologia não desempenha nenhum papel especial. O molho secreto é, aparentemente, o que os educadores sempre desejaram, uma estratégia de longo prazo baseada nos chavões que aprenderam na escola de educação.

nós, gastos com saúde per capita

Vou criticar a abordagem e as conclusões do livro, mas não o próprio David. Passamos algum tempo conversando antes e depois de nossos 20 minutos no palco. Acho que ele é um cara legal - inteligente e razoável. E quem pode argumentar com a noção de que uma reforma escolar bem-sucedida requer um plano e tempo para realizá-lo, a comunicação de altas expectativas aos alunos, apoio para os professores melhorarem suas habilidades, um currículo desafiador e uma boa experiência pré-escolar para crianças de famílias de baixa renda? Mas ele e eu viemos de disciplinas diferentes. Ele é advogado e jornalista, enquanto eu sou um cientista social. Abordamos questões sobre o que funciona na educação com diferentes ferramentas e hábitos mentais. E assim como a história da ilha onde todos vivem 100 anos, a história de David sobre Union City merece uma inspeção cuidadosa como uma afirmação empírica sujeita a verificação.

O esforço para identificar o que funciona a partir da variação natural nas práticas e resultados tem uma longa história dentro e fora da educação. Na área de saúde, por exemplo, os epidemiologistas procuram padrões de exposição ou atividade associados a doenças. Um clássico do gênero é o British Doctors Study, publicado em 1954, que encontrou uma associação estatística entre tabagismo e câncer de pulmão.

Na educação, a abordagem paralela tem sua história mais longa em algo chamado movimento das escolas eficazes, que surgiu em resposta ao famoso relatório de 1966 de James Coleman, que pretendia mostrar que quase todas as diferenças no desempenho dos alunos nas escolas dos Estados Unidos eram devidas à família fundo. Inicialmente, os pesquisadores desafiaram essas descobertas identificando escolas onde as crianças pobres estavam tendo altos níveis de desempenho. Uma segunda onda de pesquisas foi além dessas provas de existência para exames comparativos das práticas em escolas particularmente eficazes e relativamente ineficazes que atendem a populações demograficamente semelhantes.

quem vai para a guerra primeiro

Em minha opinião, não houve muito resultado de pesquisas escolares eficazes, porque as distinções entre escolas boas e ruins foram traçadas no nível de características abstratas, em vez de processos para gerar melhorias escolares que podem ser replicadas. Por exemplo, aprendemos com pesquisas eficazes sobre escolas que em boas escolas há um compromisso compartilhado entre os funcionários com a missão e as prioridades da escola. Mas não aprendemos o processo pelo qual esse compromisso pode ser criado. É como comprar um livro de autoajuda sobre como administrar um restaurante e ler que servir comida boa é realmente importante.

Mas sejam quais forem as limitações da longa história de pesquisas eficazes nas escolas, pelo menos a metodologia pode ser defendida no contexto da ciência da epidemiologia. Se os estudos forem bem implementados, sabemos que as escolas identificadas como eficazes estão de fato tendo um desempenho em níveis anormalmente altos e que as escolas de comparação com resultados menos estelares têm dados demográficos semelhantes. Nesse contexto, perguntar o que é diferente nas escolas de alto desempenho versus escolas de baixo desempenho é uma questão válida e respondível, e não é diferente, em princípio, de perguntar o que é diferente em pessoas que têm câncer de pulmão em comparação com pessoas semelhantes que não têm.

Agora vamos dar uma olhada em Union City, NJ. É uma pequena cidade em massa de terra (cerca de uma milha quadrada) e população (cerca de 65.000), mas está longe de ser uma pequena cidade americana típica, visto que a população é predominantemente hispânica (85%). Quatro em cada cinco famílias falam espanhol em casa. Muitos dos imigrantes recentes são equatorianos. Os negros são uma parte muito pequena da população (5%).

Union City é uma das várias pequenas cidades do outro lado do rio Hudson de Nova York que foram separadas por terreno aberto quando foram fundadas como vilas no ano 18ºséculo, mas agora parece uma divisão política inteiramente arbitrária de uma expansão contínua de ruas urbanas. Existem outras 14 cidades em NJ a menos de 5 milhas de Union City, incluindo as cidades vizinhas de Weehawken, West New York e Jersey City. Nenhum tem as características populacionais de Union City. Em particular, apenas West New York das comunidades vizinhas tem uma população de maioria hispânica.

De uma perspectiva comparativa, me pergunto por que Kirp escolheu basear um manual para reviver a educação pública em um distrito escolar que é tão demograficamente atípico. A essência de fazer inferências causais sobre escolas eficazes começa com a capacidade de comparar escolas que atendem alunos semelhantes, mas obtêm resultados diferentes, enquanto David escolheu um distrito escolar para seu estudo de caso que não pode ser comparado com qualquer outra coisa. Dada sua escolha de alvo, ele nunca teria sido capaz de convencer um cético de que é o sistema educacional de Union City, e não sua demografia única, o responsável por os alunos vencerem as adversidades. E não é apenas o fato de ser uma cidade hispânica que torna Union City problemática em termos de fazer comparações, mas a questão do que leva os hispânicos a se localizar ali, em vez de em uma das muitas comunidades adjacentes que são mais racial / etnicamente heterogêneas. Talvez os hispânicos que são atraídos por Union City sejam diferentes em termos de seus valores, incluindo suas expectativas quanto à educação de seus filhos. Não há como separar os efeitos mesclados de escolaridade, comunidade e família neste caso. É uma bagunça do ponto de vista do raciocínio causal.

Mas espere, tem mais! As escolas de Union City não são realmente estelares - elas estão apenas na média ou um pouco acima da média, dependendo do resultado que está sendo examinado. A figura abaixo apresenta 7ºresultados da avaliação estadual em matemática e leitura para os hispânicos em Union City, em três distritos escolares adjacentes e no estado como um todo. [eu] Eu me concentro nos hispânicos porque a grande maioria dos alunos em Union City se enquadra nessa categoria demográfica. Assim, comparar o desempenho dos alunos hispânicos em Union City com os alunos hispânicos em outros distritos fornece uma comparação comparativa com os demais do que se Union City e outros distritos fossem comparados com base no desempenho de todos os seus alunos.

Tabela Union City

Como a figura ilustra, Union City e West New York têm cerca de 60% de seus alunos hispânicos com desempenho de proficiência ou superior em matemática, que é aproximadamente a média estadual para todos os alunos. Esses dois distritos fazem um trabalho melhor em matemática para os hispânicos do que Weehawken e Jersey City. Na leitura, em contraste, os hispânicos em Weehawken se saem melhor, tendo um desempenho na média estadual para todos os alunos, enquanto aqueles em Union City têm um desempenho praticamente no mesmo nível que aqueles em West New York e Jersey City, muito abaixo da média estadual para todos alunos.

O desempenho comparativo de Union City não mostra a excepcionalidade notável que meu colega Matt Chingos e eu encontramos em estudos de excepcionalidade distrital na Carolina do Norte e na Flórida. Isso é sugerido pela figura acima. Fica claro quando os distritos escolares em Nova Jersey são classificados em termos de desempenho dos alunos hispânicos nas avaliações estaduais. Na leitura, Union City está classificado em 140ºde 266 distritos [ii] em New Jersey no desempenho de hispânicos aos 7ºgrau. Em matemática, ele se sai melhor, classificando-se em 69ºentre bairros do estado na atuação de hispânicos. [iii]

quem venceria uma guerra civil nos estados unidos

Devemos realmente esperar mudanças dramáticas na educação pública americana a partir de um manual baseado nas práticas de um distrito que é mediano no ensino de leitura e não atinge o quartil superior no ensino de matemática? É um distrito que só consegue trazer seus alunos até a média estadual de proficiência para ser nosso exemplo, principalmente quando o padrão do estado é relativamente baixo ?

Lembrete para aqueles que desejam estudar as características distintivas dos distritos de voos elevados:

Primeiro, escolha distritos com voos elevados. Os bancos de dados e estatísticas estaduais são essenciais para essa tarefa. Os reformadores podem ser motivados a replicar as práticas dos melhores distritos, ao passo que ninguém ficará entusiasmado com a possibilidade de adotar práticas que apenas resultem em ser medianos.

Em segundo lugar, compare as práticas dos distritos com alunos semelhantes, mas com resultados diferentes. Precisamos saber até que ponto os distritos com voos altos são diferentes dos menos eficazes, o que só pode ser derivado de comparações. Nas palavras de Rudyard Kipling, O que ele pode saber da Inglaterra, que só a Inglaterra conhece? O que parece uma prática importante quando examinada isoladamente pode parecer bem diferente se descobrir que distritos menos bem-sucedidos estão fazendo exatamente a mesma coisa.

como funciona o sistema de saúde americano

Terceiro, compare as práticas entre distritos de alto desempenho com alunos semelhantes. Provavelmente, existem várias abordagens para criar escolas eficazes. Nunca saberemos disso se nos concentrarmos apenas nas práticas de um exemplar.

Quarto, identifique práticas distintas e bem-sucedidas em um nível operacional e acionável. Obviamente, as organizações de sucesso que oferecem serviços humanos são compostas por pessoas que podem fazer seu trabalho e compartilhar os objetivos da organização. Como, em particular, essas organizações atraem ou desenvolvem bons funcionários e garantem seu comprometimento?

Uma vez que tenhamos descrições válidas das diferenças operacionais distintas entre escolas boas e não tão boas, controlando as diferenças na formação do aluno e fatores fora da escola que estão além do controle do distrito, a ciência social da reforma do distrito pode mudar para planejada e intervenções cuidadosamente avaliadas. Esse é o nosso manual. É aí que precisamos estar. Eu não acho que o caminho passa por Union City.



[eu] Minha seleção de 7ºos resultados da avaliação de notas são arbitrários. A história não muda muito se outras notas são o foco.

[ii] Esses são distritos nos quais um número suficiente de hispânicos fez o exame para o estado reportar uma pontuação para este grupo.

[iii] Comparar os distritos com base apenas nas pontuações dos testes de desempenho dos alunos hispânicos em uma série é uma abordagem aproximada. Um esforço completo e sofisticado usaria dados de nível de aluno e observaria os resultados em várias séries, examinaria as mudanças ao longo do tempo e empregaria controles para histórico familiar, tendências de estado e a natureza multinível dos dados. O desempenho de Union City pode muito bem parecer diferente quando visto por essas lentes, que espero que alguém tenha tempo, dados e recursos para usar.