Dados errados mostraram declínio no primeiro ano; na verdade subiu

Em outubro, o National Student Clearinghouse Research Center divulgou seu relatório prévio anual de matrículas “Mantenha-se informado”, que proclamava que as matrículas no primeiro ano da faculdade haviam caiu 5 por cento do outono de 2023 ao outono de 2024. Isso teria significado o maior declínio desde a pandemia da COVID-19.

Acontece que os dados eram falsos. Na segunda-feira, o NSC reconhecido que um erro metodológico levou a uma grande deturpação das tendências de matrícula no primeiro ano. Na verdade, disse a organização sem fins lucrativos, as matrículas no primeiro ano parecem ter aumentado no outono pretérito.

Funcionários do NSC disseram que o erro foi causado pela rotulagem incorreta de muitos alunos do primeiro ano uma vez que alunos do ensino médio com matrícula dupla – o que também ajuda a explicar o aumento colossal de 7,2% nas matrículas duplas no relatório de outubro. O erro também comprometeu uma relatório próprio na matrícula de 18 anos e na epílogo da FAFSA que o NSC publicou em dezembro com a National College Attainment Network.

Doug Shapiro, diretor executivo do meio de pesquisa, escreveu num e-mail para Por dentro do ensino superior que a equipe de pesquisa descobriu o erro enquanto preparava seu próximo relatório de estimativas atuais de matrículas, com lançamento previsto para quinta-feira. Os resultados desse relatório – que utiliza uma metodologia dissemelhante – mostraram matrículas significativamente mais altas no primeiro ano, disse Shapiro, o que levou a uma revisão retroativa do relatório de outubro.

Shapiro também disse que o erro esteve presente em todos os relatórios anteriores do “Mantenha-se informado”, desde o primeiro em 2020. Eles o detectaram levante ano, acrescentou ele, porque o impacto foi ampliado por um aumento universal nas matrículas duplas. Os pesquisadores ainda estão revisando a metodologia do relatório, disse ele, e fornecerão mais informações sobre a desculpa do erro quando estiverem disponíveis.

“O National Student Clearinghouse Research Center reconhece a valimento e o significado do seu papel no fornecimento de pesquisas precisas e confiáveis ​​para a comunidade do ensino superior”, escreveu Shapiro. “Lamentamos profundamente levante erro e estamos conduzindo uma revisão completa para compreender a desculpa raiz e implementar medidas para prevenir tais ocorrências no horizonte.”

Não é um erro pequeno. A argumento de que as matrículas de calouros haviam derrubado precipitadamente moldou discussões sobre o cenário do ensino superior durante meses. Pareceu validar as afirmações de que os diplomados do ensino secundário estavam a afastar-se do ensino superior e confirmou os receios de que o ano pretérito implementação desastrada do novo formulário de ajuda federalista seria restringir o chegada à faculdade. Por dentro do ensino superior relatou a invenção em vários artigos e foi destaque nos principais meios de notícia, incluindo O jornal New York Times e O Washington Post.

Houve alguns sinais iniciais de que os dados podem estar errados. O Departamento de Instrução sinalizou um problema potencial com o relatório do NSC em Outubro, observando que o seu dados de ajuda financeira mostrou um aumento de 5% no número de estudantes que recebem ajuda federalista. Num enviado na noite de segunda-feira, o subsecretário James Kvaal disse que o departamento ficou “encorajado e aliviado” pela correção do NSC.

Mas, na maior segmento dos casos, o erro foi um choque para os líderes e investigadores do ensino superior e ameaço minar a posição do NSC uma vez que principal natividade de dados sobre matrículas.

Bill DeBaun, diretor sênior de dados e iniciativas estratégicas da NCAN, trabalhou diretamente com a equipe de pesquisa do NSC em seu relatório próprio conjunto. Sua experiência não levantou nenhuma bandeira na estação, disse ele, e ele está “surpreso com S maiúsculo” pelo erro, uma vez que as taxas de epílogo da FAFSA em setembro permaneceram quase nove pontos percentuais detrás do ciclo de 2023–24.

“Dentro das más notícias também há boas notícias: que estamos realmente ganhando impulso a partir de 2023”, disse DeBaun. “Dito isto, é certamente surpreendente. O último ciclo de ajuda financeira foi extremamente difícil para estudantes e famílias, e esta seria a primeira vez que os dados de epílogo da FAFSA e as matrículas no primeiro ano seguiram em direções opostas.”

Ainda acredito no meio de pesquisa e agradeço a transparência. Não é fácil permitir um erro desta graduação.”

—Bill DeBaun, NCAN

Um cômputo de pesquisa?

Os relatórios de matrículas do NSCRC estão entre os mais utilizados no ensino superior: os decisores políticos, os líderes institucionais e os meios de notícia social confiam neles para obterem uma visão antecipada e abrangente das tendências de matrículas do ano lectivo. Enquanto os prognosticadores se preocupam com o declínio do ensino superior, os relatórios do NSC são frequentemente tratados uma vez que um termómetro para um sector febril, o principal indicador da sua saúde à graduação pátrio.

O último erro de dados pode minar a crédito no meio. Alguns dizem que uma boa ração de ceticismo pode não ser uma coisa ruim.

Dominique Baker, professor associado de instrução e políticas públicas na Universidade de Delaware, tem criticado o relatório “Mantenha-se informado” e, de forma mais ampla, os dados de matrículas do meio de pesquisa há anos. Ela disse que os seus problemas vão além dos erros metodológicos e que a sua estratégia de “acerto rápido”, o conjunto de dados relativamente pequeno e a crédito na projecção tornam-no numa natividade não fiável.

“As pessoas cometem erros de codificação. Nascente foi significativo, com consequências reais”, disse ela. “Mas sempre fui intrigado em relação aos primeiros dados do NSC. Mesmo com tudo codificado e traçado corretamente, deve ter muito ceticismo sobre isso.”

O relatório “Mantenha-se informado” é, crucialmente, prévio: baseia-se em dados recolhidos de muro de metade de todas as instituições de ensino superior para projectar tendências mais amplas. Foi criado no verão de 2020 para “fornecer informações sobre matrículas antecipadas e em tempo real para atender às necessidades urgentes de informação da comunidade de ensino superior no auge da pandemia de COVID”, uma vez que afirmou o NSC.

Baker disse que a história da origem do relatório é segmento do seu problema: foi construído para nutrir o gosto cada vez mais voraz por dados de matrículas antecipadas, tornando-o vulnerável a imprecisões e omissões.

“Se você está aguardando uma proclamação de devastação, uma vez que muitos legisladores e pesquisadores têm feito, você quer qualquer informação que possa ter em suas mãos e a quer o mais rápido provável”, disse ela. “Isso levou a um esforço zeloso para publicar informações o mais rápido provável, embora não haja muita crédito por trás disso.”

O conjunto de dados de inverno mais abrangente do NSC diferiu muitas vezes do seu primo prévio, embora a disparidade nunca tenha sido tão grande antes. No outono de 2023, o relatório “Mantenha-se informado” descobriu que as matrículas no primeiro ano de graduação haviam caiu 3,6 por cento; alguns meses depois, o relatório de inverno mostrou um aumento de 0,8 por cento.

DeBaun disse que embora esteja desapontado com o erro, ele acha que seria um erro permitir que isso prejudicasse a credibilidade do NSC no campo.

“Ainda acredito no meio de pesquisa e agradeço a transparência. Não é fácil permitir um erro desta dimensão”, afirmou. “Os dados (NSC) são realmente importantes para moldar nossa compreensão sobre o chegada e o desempenho na faculdade. Eu gostaria que isso não tivesse realizado, mas isso não me dissuadirá de usar suas pesquisas no horizonte.”

Comida para quem tem penúria de dados

Secção da razão pela qual os dados de outubro atraíram uma cobertura tão ampliada da mídia – veículos uma vez que O jornal New York Times nem sempre abordamos tão de perto as tendências de matrículas no outono – foi que 2024 ofereceu uma confluência de histórias de cimalha perfil no ensino superior que levantaram o espectro de um declínio nas matrículas.

A implementação desastrada do novo FAFSA pelo Departamento de Instrução reduziu as taxas de epílogo do formulário de ajuda federalista, o que muitos observadores previram que se traduziria numa redução universal das matrículas no outono. Os protestos da primavera sobre a guerra Israel-Hamas dominaram as manchetes e geraram conjecturas de que os estudantes abandonariam o ensino superior devido ao caos. E uma vez que nos anos anteriores, a proposta de valor de um diploma universitário continuou a diminuir aos olhos do público.

Mas o perfil do NSCRC tem aumentado desde que as preocupações com o abisso demográfico começaram a correr em meados da dez de 2010. Explodiu depois que a pandemia da COVID-19 torpedeou as matrículas no outono de 2020, deixando os defensores do ensino superior procurando ansiosamente por sinais de recuperação nos anos seguintes.

O NSC, disse DeBaun, continua a ser a única natividade de dados nacionais oportunos sobre o número de alunos e os resultados. Isso pode ser segmento do problema.

O Departamento de Instrução coleta dados auto-relatados pelas instituições e os compila no Sistema Integrado de Dados do Ensino Superior. Mas dados precisos do IPEDS são divulgados mais de um ano posteriormente o início do ano letivo relevante; os números de matrículas para o outono de 2024, por exemplo, não serão divulgados antes de janeiro de 2026, no mínimo. E o IPEDS historicamente coletou dados unicamente sobre estudantes de graduação em período integral e pela primeira vez, deixando fora de cena uma grande e crescente tira de estudantes não tradicionais, embora isso seja começando a mudar à medida que proliferam os apelos por dados federais mais abrangentes.

Além do IPEDS, não existe um conjunto de dados nacionais, abrangentes e baseados em unidades sobre matrículas no ensino superior. Na verdade, em 2008, a Lei do Ensino Superior foi revista para incluir disposições que proíbem a geração de tal conjunto de dados, citando preocupações com a privacidade. Múltiplo tentativas para anular a proibição não tiveram sucesso.

Assim, a tarefa recaiu sobre terceiros, empresas de estudo de dados e organizações privadas sem fins lucrativos, uma vez que a câmara de ressarcimento, que só estabeleceu o seu braço de investigação em 2010. Baker disse que isto levou a dados menos fiáveis, sem qualquer responsabilização pública.

“Zero disto seria um problema se tivéssemos um sistema pátrio de registo de unidades estudantis, uma vez que fazem tantos outros países desenvolvidos”, disse Baker. “Não deveríamos ter que mourejar com tudo isso mishegoss.”