Provas nas escolas de exame da cidade de Nova York e Boston

A cidade de Nova York está lutando para saber o que fazer com suas escolas de exames. Os alunos da Stuyvesant, Bronx Science e Brooklyn Tech (as escolas de exame mais antigas) têm um desempenho brilhante e frequentam as melhores faculdades. Seus alunos marcam 99ºpercentil da distribuição SAT estadual (com Stuyvesant em 99,9ºpercentil) e representam a maioria dos alunos da cidade de Nova York que estudam em Harvard, Princeton e Yale.1Em qualquer medida, são escolas de elite e são reverenciadas como joias do sistema escolar da cidade.

Mas dos 900 calouros que se inscreveram em Stuyvesant no outono passado, apenas 10 eram negros.doisPor lei estadual, a admissão a essas escolas é feita por meio de um teste de admissão especializado e voluntário. O prefeito Bill de Blasio e outros reclamam que este sistema de admissão perpetua a desigualdade de oportunidades para uma educação excelente.

Muita tinta foi derramada nas escolas de exames, nos meios de comunicação populares e também nas revistas acadêmicas. Neste artigo, abordo uma questão restrita, mas relevante: o impacto causal dessas escolas sobre os alunos que as frequentam. As escolas de exame produzem graduados academicamente excelentes ou simplesmente admitem alunos estelares e desfrutam de crédito por seus sucessos? Também discuto brevemente métodos alternativos que a cidade poderia usar para distribuir vagas escassas nessas escolas lotadas.



Compreender a eficácia de qualquer escola é um desafio porque os pais escolhem as escolas de seus filhos. Em muitos casos, a escola que a criança frequenta está vinculada ao endereço dela, então um pai efetivamente escolhe uma escola quando ela escolhe uma residência. Em lugares como Nova York e Boston, que têm escolha em todo o distrito, as famílias podem escolher entre dezenas de escolas públicas, incluindo charters, ímãs e escolas de exame. E há escolas particulares para quem tem condições de pagar ou tem voucher para subsidiar o custo.

Como os pais têm opções, algumas escolas estão repletas de alunos (digamos, filhos de pais bem-educados e altamente motivados) que teriam um bom desempenho em quase todos os ambientes. Esse padrão pode nos levar a pensar que tais escolas oferecem uma educação exemplar, quando a verdade é que simplesmente atraem alunos fortes.

Esse é o viés de seleção, o maior desafio para avaliar a eficácia das escolas. A Stuyvesant High School está repleta de alunos inteligentes que podem ter sucesso em qualquer lugar. Quando esses alunos vão bem, é por causa da escola ou dos alunos ou de ambos?

No caso de escolas de exame, temos viés de seleção de esteróides. Os alunos que entram em Stuyvesant têm notas de teste do ensino médio com dois desvios-padrão completos acima da média da cidade - ou seja, eles pontuam mais do que 95% dos alunos das escolas públicas da cidade. Como podemos desemaranhar o efeito das escolas de exame em face de tais diferenças maciças no desempenho da linha de base?

Para superar esse desafio, os pesquisadores têm feito uso dos testes que tornam estes exame escolas. Por lei estadual, o ingresso nas escolas de exame em Nova York é determinado pela pontuação do aluno no Specialized High School Admissions Test (SHSAT). Um aluno com uma pontuação alta o suficiente pode ser admitido na Stuyvesant. Uma pontuação um pouco mais baixa a colocará no Bronx Science e assim por diante.3Os pesquisadores exploraram esses limites para estimar o impacto causal das escolas de exame no desempenho acadêmico dos alunos e na frequência à faculdade.

O método de pesquisa é denominado design de regressão-descontinuidade. A chave para esta abordagem é que é essencialmente aleatório se alguém acaba logo acima ou logo abaixo do ponto de corte. Ao comparar os alunos apenas em cada lado do corte, podemos capturar o impacto causal da escola nos resultados dos alunos.

Obviamente, não é de todo aleatório que alguns alunos tenham pontuações muito altas e outros, pontuações muito baixas, e, claro, mais daqueles com pontuações altas entrarão nas escolas de exame. Isso é exatamente o que vemos em Nova York. A análise de regressão-descontinuidade se baseia no grande e descontínuo pular na frequência à escola de exame logo nas notas de corte. Uma pontuação um pouquinho acima do ponto de corte garante a admissão, enquanto uma pontuação um pouquinho abaixo produz rejeição. Essas smidgens podem ser o resultado de uma variação aleatória no teste ou em como o aluno está se sentindo no dia do teste.

Dois grupos de economistas aplicaram a metodologia de regressão-descontinuidade ao estudo das escolas de exames da cidade de Nova York. Atila Abdulkadiroğlu (Duke University), Joshua Angrist e Parag Pathak (ambos do Massachusetts Institute of Technology) publicaram The Elite Illusion: Achievement Effects nas Boston e New York Exam Schools em Econometrica enquanto Will Dobbie (Princeton) e Roland Fryer (Harvard) publicaram O impacto de frequentar uma escola com colegas de alto desempenho : Provas das Escolas de Exame da Cidade de Nova York dentro American Economic Journal: Applied Economics .Quatro cinco

O que os pesquisadores concluem? Eles encontram um precisamente efeito zero das escolas de exame quanto à frequência à faculdade, seletividade para a faculdade e formatura da faculdade. Eles colocam os dados no moedor, e esse é o resultado nada animador. Os resultados para as escolas de exame de Boston são os mesmos, com um resultado bônus de efeito zero nas pontuações dos testes, incluindo o SAT e o PSAT. Os autores observam que ainda é possível que as escolas afetem os resultados mais tarde na vida, como emprego ou riqueza. Mas, se for o caso, tal efeito não ocorre por meio da frequência a uma faculdade de elite.

O que os pesquisadores concluem? Eles encontram um precisamente efeito zero das escolas de exame quanto à frequência à faculdade, seletividade para a faculdade e formatura da faculdade.

Esses resultados nulos tiram muito o ar das discussões forjadas sobre as escolas de exames como portas de entrada para oportunidades econômicas. Pelo menos para os alunos que estão à beira da admissão nas escolas de exame, as escolas não têm nenhum efeito mensurável no desempenho acadêmico ou nos resultados pós-secundários. Esses alunos podem ser mais felizes, mais engajados ou mais seguros nessas escolas. Mas é surpreendente que não vejamos os efeitos onde tantos esperavam.

Embora um ponto forte do projeto de regressão-descontinuidade seja que obtemos efeitos causais para os alunos que estão apenas na margem de admissão, um ponto fraco é que não podemos estimar os efeitos para os alunos que estavam certos de admissão (os melhores alunos) ou aqueles que não se preocupam em se inscrever no regime de admissões em vigor.

A cidade, ou pelo menos o prefeito, gostaria de diversificar as escolas de exames. Como as escolas para alunos superdotados podem ser diversificadas? Felizmente, temos muitas pesquisas excelentes sobre essa questão.6, 7

quantos ilegais obtêm assistência social

A abordagem de admissão atual quase certamente exclui muitos alunos superdotados e desfavorecidos. Quando dependemos de pais, professores ou alunos para tomar a decisão de se inscrever em um programa para alunos superdotados (por exemplo, inscrevendo-se voluntariamente em um teste), as evidências indicam que são alunos desfavorecidos que são desproporcionalmente excluídos.

Mas livrar-se do teste é não a resposta. Pais com alto nível de escolaridade e alta renda trabalham o sistema para incluir seus filhos nesses programas. Quanto menos transparente for a abordagem (por exemplo, portfólios ou recomendações de professores em vez de um teste padronizado), maior será a vantagem que esses pais experientes e conectados têm para ganhar o jogo.

Uma etapa importante é fazer o teste universal , ao invés de um que os alunos escolher pegar. Nos doze estados onde os testes de admissão às faculdades são universais (gratuitos, obrigatórios e aplicados durante o horário escolar), muitos outros alunos fazem o teste e vão para a faculdade.8O efeito democratizador é mais forte entre estudantes de baixa renda e não brancos. A mesma dinâmica se aplica a crianças pequenas: quando o teste de superdotação é universal, crianças pobres, negras e hispânicas têm muito mais probabilidade de acabar em classes de superdotados.9Um distrito escolar na Flórida mostrou um grande aumento na diversidade de seus programas para superdotados quando passou a usar um teste universal, em vez de recomendações de pais e professores, para identificar alunos superdotados.

Em vez de forçar os alunos a fazer mais um teste, Nova York poderia usar os 7º- e 8º- avaliação de testes para determinar a admissão às escolas de exame. Esses testes estão, em princípio, alinhados ao que é ensinado nas escolas e, portanto, são uma métrica apropriada para julgar o desempenho dos alunos. Quando tantos estão reclamando do excesso de teste, por que ter mais um teste para os alunos estudarem?

A cidade poderia ir mais longe na diversificação do corpo discente ao admitir os melhores pontuadores em cada escola secundária para as escolas de exame. O Texas usa essa abordagem para determinar a admissão nos carros-chefe da Universidade do Texas: a maior fatia (originalmente 10%, agora menor) de alunos em cada escola é automaticamente admitida nessas faculdades seletivas. Isso garante que as faculdades de elite do Texas reflitam, pelo menos parcialmente, a diversidade econômica, étnica e racial do sistema escolar do estado (altamente segregado).

Essa abordagem dos 10% principais pode levar alguns pais a se esforçarem para matricular seus filhos em escolas de baixo desempenho, onde seus filhos têm maior probabilidade de pontuar no topo. Esse efeito foi de fato observado no Texas. Isso não seria necessariamente um resultado ruim, uma vez que ajuda a integrar o sistema racial e economicamente.

Alguns podem objetar que os testes padronizados dados a todos os alunos não são suficientemente desafiadores para escolher a elite acadêmica adequada para as escolas de exame. Isso é chamado de efeito de teto, em que um teste não consegue distinguir entre grandes e superaltas realizações. Esta é uma teoria plausível, mas os dados não suportam essa hipótese em Nova York. De acordo com as equipes que conduziram as análises discutidas anteriormente, os alunos da Brooklyn Tech pontuam cerca de 1,5 desvio padrão acima do resto da cidade, o que está dentro da variação normal e mensurável do teste padronizado da cidade. Mesmo em Stuyvesant, os alunos estão a dois desvios-padrão da cidade nos testes do ensino médio.

Se as escolas e a cidade pretendem manter o teste de admissão especializado, eles podem aplicá-lo em um dia escolar para tudo alunos que pontuam acima de um determinado limite nos testes universais do ensino médio.

A cidade de Nova York tem muito que lutar para decidir o destino de suas escolas de exames. Levar em consideração as evidências científicas sobre seu desempenho seria um excelente caminho a seguir.