1 pontos por GN⁺ 2024-12-12 | 1 comentários | Compartilhar no WhatsApp
  • No primeiro TIMSS após a pandemia, as pontuações de matemática dos alunos americanos do 4º e 8º anos caíram bastante em relação a 2019, enquanto alguns países tiveram alta no mesmo período
  • Os EUA continuam na faixa intermediária do ranking internacional, mas vários países que antes ficavam abaixo dos americanos começaram a ultrapassá-los em matemática
  • A queda se concentrou mais nos alunos de menor desempenho do que na média geral; entre os americanos do 4º ano, os 10% com pior desempenho ficaram 37 pontos abaixo em matemática e 22 em ciências
  • A avaliação de 2023 contou com mais de 650 mil alunos do 4º e 8º anos em 64 países, e Singapura, Coreia do Sul, Hong Kong e Japão ficaram entre os primeiros em grande parte das séries e disciplinas
  • Foi confirmada a relação entre faltas, nível socioeconômico, clima escolar, preferência pelas disciplinas e desempenho, e em vários países a diferença de gênero favorável aos meninos voltou a aumentar

Queda no desempenho em matemática dos EUA mostrada pelo TIMSS 2023

  • Os resultados do TIMSS 2023 mostram uma avaliação internacional de matemática e ciências aplicada em 2023 a mais de 650 mil alunos do 4º e 8º anos em 64 países
    • O TIMSS é realizado a cada quatro anos desde 1995
    • Ele é usado para monitorar se os estudantes adquiriram competências básicas em matemática e ciências
  • Entre 2019 e 2023, os alunos americanos do 4º ano tiveram uma queda acentuada nas pontuações de matemática
    • Mais de 10 países tiveram aumento nas pontuações no mesmo período
    • A queda em matemática no 4º ano dos EUA esteve entre as maiores entre os países participantes
    • No ranking internacional, o país ainda está na faixa intermediária
  • A queda no 8º ano foi ainda maior, e apenas 3 países registraram aumento de pontuação nessa série
  • Singapura, Coreia do Sul, Hong Kong e Japão ficaram no grupo de elite na maior parte das séries e disciplinas
  • Na maioria dos países participantes, a maior parte dos alunos atingiu o low benchmark
    • O low benchmark indica domínio básico de matemática e conhecimento de fatos científicos básicos
    • Cerca de um terço atingiu o high benchmark, o que indica capacidade de aplicar conceitos em diferentes situações

Impacto concentrado nos alunos de menor desempenho

  • Uma parte significativa da queda nas pontuações dos EUA veio do recuo entre os alunos com pior desempenho
    • As pontuações dos alunos de alto desempenho do 4º ano nos EUA ficaram parecidas com as de 2019
    • Os 10% de pior desempenho no 4º ano dos EUA ficaram 37 pontos abaixo em matemática e 22 pontos abaixo em ciências em relação a alunos equivalentes de 2019
    • Entre os alunos de menor desempenho do 8º ano nos EUA, houve queda de 19 pontos em matemática
    • Um em cada cinco alunos do 8º ano nos EUA ficou abaixo do low benchmark, sem sequer alcançar a proficiência básica
  • A distância entre alunos de alto e baixo desempenho já vinha aumentando antes da pandemia, e a razão não está clara
    • Pesquisas sobre aprendizagem após a pandemia também mostraram ampliação das desigualdades por raça e renda, enquanto muitos alunos de renda média e alta mantiveram bom desempenho

Recuperação pós-pandemia e diferenças entre países

  • Este TIMSS foi o primeiro a trazer resultados após a desorganização global da educação causada pela resposta à COVID
    • Alguns países melhoraram em testes internacionais após a pandemia, com destaque para avanços em países do Leste Europeu e do Oriente Médio
    • As formas de fechamento das escolas variaram entre os países; alguns priorizaram aulas presenciais para os mais novos, outros deram prioridade aos alunos mais velhos, e houve também diferentes modelos híbridos
    • Os organizadores do teste não coletaram informações suficientes para ligar essas estratégias diretamente aos resultados, e mais pesquisas serão necessárias

A diferença de gênero voltou a aumentar

  • Em vários países, a diferença de gênero voltou a crescer em favor dos meninos, especialmente na matemática do 4º ano
    • A diferença de gênero, que era grande no início do TIMSS em 1995, havia diminuído com o tempo, mas parece ter reaparecido
    • Dirk Hastedt, da IEA, considera que a diferença de gênero é algo que deve ser tratado e monitorado com muita cautela

Fatores escolares e familiares que caminharam junto com as pontuações

  • Os questionários do TIMSS também investigaram faltas, recursos familiares, qualidade das aulas, oportunidades de experimentos em ciências e preferência por matemática e ciências
    • Na média global, 1 em cada 10 alunos falta à escola pelo menos uma vez por semana, e 1 em cada 5 falta pelo menos uma vez a cada duas semanas
    • Os alunos que quase nunca faltam tiveram as maiores pontuações, enquanto os que faltam com frequência tiveram as menores
    • Houve forte correlação entre nível socioeconômico e pontuação, e os resultados foram mais altos entre alunos de famílias de maior renda e entre estudantes de escolas com mais alunos de famílias mais ricas
    • Escolas cujos diretores disseram ter menos problemas disciplinares e maior foco no sucesso acadêmico tiveram médias mais altas
    • Alunos que disseram gostar de matemática e ciências tiveram desempenho médio melhor do que os que não gostam, mas essa relação não foi tão forte quanto a relação com o nível socioeconômico

1 comentários

 
GN⁺ 2024-12-12
Comentários do Hacker News
  • Relatório original: https://timss2023.org/results/

  • Fico curioso se há dados demográficos dos participantes para verificar se a queda ocorreu dentro dos grupos ou se é produto de uma mudança na composição
    Pelo que sabemos agora, poderia ser um paradoxo de Simpson, em que cada subgrupo melhorou, mas a distribuição geral das notas caiu. Os EUA têm uma boa educação e os filhos de imigrantes também se saem melhor do que seus pares nos países de origem, mas não tão bem quanto o grupo modal de americanos brancos; portanto, se a proporção de brancos na composição dos alunos cair depois de uma imigração em massa, as notas podem cair mesmo que a qualidade da educação melhore

    • Olhando os relatórios de 2019 e 2023, em matemática do 4º ano todos os grupos raciais caíram pelo menos cerca de 10 pontos, e há também um aspecto em que o efeito parece maior por causa da reponderação das proporções populacionais
      American Indian / Alaska Native: 2,5%→1,6%, 515→504
      Asian: 5,3%→4,3%, 586→571
      Black: 13,2%→15,5%, 494→468
      Hispanic: 25,8%→26,3%, 508→491
      Native Hawaiian / Other Pacific Islander: 1,7%→0,9%, 500→457
      Two or more races: 5,6%→8,1%, 554→542
      White: 45,9%→43,2%, 559→543
      [1] https://nces.ed.gov/timss/results19/index.asp#/math/achievement
      [2] https://nces.ed.gov/timss/results23/index.asp#/math/achievement
    • O ponto central da matéria também é que a queda foi maior porque os alunos de desempenho mais baixo ficaram ainda mais para trás
      As notas dos alunos de 4º ano no topo nos EUA ficaram parecidas com as de 2019, mas os 10% mais baixos caíram 37 pontos em matemática e 22 em ciências, e os alunos de 8º ano na parte de baixo caíram 19 pontos em matemática. Um em cada cinco alunos americanos do 8º ano ficou abaixo de um patamar baixo, sem nem proficiência básica, e a lacuna entre o topo e a base já tinha começado a se abrir antes da pandemia. A questão é o que fazer com essa informação
    • A afirmação de que “a educação americana é excelente, mas filhos de imigrantes não chegam ao nível do grupo modal de americanos brancos” não combina em nada com a minha experiência
      Na escola, participei muito de competições extracurriculares de matemática e ciências, e quem vencia não eram as crianças brancas. Lembro disso com ainda mais nitidez porque também ouvi comentários bastante racistas relacionados a isso
    • Gostaria de saber se há dados que sustentem a afirmação de que crianças imigrantes em escolas americanas são piores em matemática
      Isso não bate com a minha experiência pessoal. Na Europa, é bem sabido que a educação K-12 dos EUA é fraca. No meu ensino fundamental e médio, em um país de terceiro mundo na Europa, todos os alunos que foram para os EUA em intercâmbio voltaram dizendo que já sabiam a matemática ensinada nas escolas americanas
    • Os EUA têm um ensino superior excelente, mas o K-12 é irregular, na melhor das hipóteses, e a relação custo-benefício parece especialmente questionável
  • Eu sofria antes porque os padrões de matemática do sistema educacional americano eram baixos
    No livro didático de Common Core Advanced do 7º ano, havia algo como “mostre que 3(x+2)=3X+6”, e a resposta esperada era preencher uma tabela listando alguns cálculos concretos. A lição de pré-álgebra do meu filho também está no nível de calcular coisas como “-1 - (-5)”; isso em si não é ruim, mas é um problema se todas as questões são simples assim. Com o tempo, percebi que os americanos não acham que matemática seja tão importante para todo mundo, e este meme mostra bem isso: https://www.reddit.com/r/EngineeringStudents/comments/pd6hhc/meme_im_seeing_a_lot_of_people_lately_worrying/#lightbox
    Por isso, o ensino médio basicamente ensina apenas o muito básico, como cálculo e definições, e o aluno que quiser ir mais fundo precisa se puxar por conta própria. Como poucas pessoas usam no dia a dia matemática mais difícil do que a do Common Core, não dá para dizer que essa abordagem seja simplesmente errada, mas acho que muitos alunos comuns que poderiam ter se tornado bons engenheiros se alguém os tivesse incentivado ou mostrado um caminho no ensino médio acabam ficando pelo caminho

    • A desigualdade no ensino de matemática nos EUA é muito grande
      Escolas privadas, escolas seletivas (Stuyvesant, Thomas Jefferson High School, High Technology High School etc.) e escolas públicas de subúrbios ricos são muito mais rigorosas. Uma escola de ensino médio americana “média” aprova cerca de 20 alunos em AP Calculus A; uma escola ruim pode não mandar nenhum, enquanto uma boa escola tem quase todos os alunos cursando AP Calculus A ou Statistics, e alguns chegam até BC
    • As pessoas muitas vezes não sabem o que estão perdendo. Muitas coisas ficam bem mais fáceis só com algum domínio de matemática do ensino médio, noções básicas de programação e atalhos de teclado
      Pessoas que não conseguem criar uma tabela dinâmica no Excel ou fazer a mesma agregação em Pandas, R ou SQL geralmente acham que não precisam dessas habilidades e, estritamente falando, estão certas. Mas ao longo da vida elas deixam passar inúmeras situações que poderiam resolver de forma muito mais rápida e elegante; como não enxergam essas oportunidades, consideram que elas nunca existiram
    • O que os alunos comuns perdem talvez não seja apenas a chance de se tornar engenheiros, mas a própria educação de que ciência e engenharia não são uma magia transmitida por “autoridades inteligentes de jaleco”, e sim algo compreensível
      Sem conhecer estatística e probabilidade, é na prática muito difícil fazer julgamentos adequados sobre políticas públicas, mas os jornais estão cheios de textos que não demonstram nenhuma compreensão disso
    • O Common Core foi como empurrar algo direto para o ambiente de produção sem um teste A/B adequado nem um lançamento canário
      As críticas à “New Math” dos anos 1960 ainda se aplicam exatamente hoje. Basta ver «Why Johnny Can't Add», de Morris Kline, no archive.org
  • A Califórnia está reduzindo os padrões, tentando retirar parte do conteúdo de matemática do currículo para ensiná-lo mais tarde e mudando para oferecer disciplinas alternativas no lugar da matemática tradicional.
    Se outros países não adotarem a mesma abordagem, as notas em provas internacionais quase certamente vão cair. Pelo que sei, essa é a política atual já aprovada pelo conselho de educação, mas há muita controvérsia e disputa, então pode haver algo que eu tenha deixado passar. Não estou dizendo que as notas deste texto e as mudanças propostas estejam relacionadas, mas, se essa tendência se mantiver e se tornar nacional, os estudantes dos EUA podem acabar competindo com estudantes internacionais que já aprenderam matemática avançada e básica em nível mais alto.
    https://www.latimes.com/california/story/2023-07-12/california-math-overhaul-focuses-on-equity-amid-low-test-scores
    https://www.theatlantic.com/ideas/archive/2023/10/california-math-framework-algebra/675509/
    https://www.edweek.org/teaching-learning/california-adopts-controversial-new-math-framework-heres-whats-in-it/2023/07

    • Essa mudança ainda não apareceu nas notas divulgadas das provas, portanto seu impacto real, positivo ou negativo, ainda não foi medido.
  • Sinceramente, estou muito mais preocupado com a alfabetização do que com a matemática.
    Entender números também é importante, mas, se você não consegue interpretar o que esses números significam no contexto, isso não serve para muita coisa. Moro em uma cidade muito pobre e tenho a impressão de que cerca de metade dos adultos que encontro não consegue ler, escrever ou falar de forma articulada no nível que se esperava no ensino médio que frequentei 20 anos atrás. Acho que isso está piorando muito com a ascensão do YouTube e com a deterioração da expressão em memes compartilhados nas redes sociais. O grande número de imigrantes para quem o inglês não é a língua materna também é parte do problema, mas isso não pode ser explicado apenas por dinheiro, sociedade, governo ou educação. Tenho certeza de que a alfabetização continuará caindo nas próximas décadas e que, se não encontrarmos uma forma de cuidar coletivamente uns dos outros e resolver esse problema, isso dificilmente levará à estabilidade social e econômica que as pessoas desejam.

    • As escolas públicas ensinaram por décadas estratégias de pistas (cueing) em vez de fonética, e as pesquisas mostraram que esse método fazia as crianças lerem pior. Só agora isso está mudando: https://www.apmreports.org/episode/2019/08/22/whats-wrong-how-schools-teach-reading
    • Há dados indicando que os adultos também estão esquecendo como ler: https://www.economist.com/finance-and-economics/2024/12/10/are-adults-forgetting-how-to-read
      Parece ser uma tendência quase mundial de queda na alfabetização e na numeracia, não só entre estudantes, mas também entre adultos. Não consigo pensar em uma explicação clara além da “pandemia”.
    • A capacidade de ler não é o mesmo que o interesse em querer ler nem, mais importante, que a capacidade de compreender.
      Não sei por que a alfabetização é tão importante e acho que hoje ela é superestimada. Ela era muito mais importante quando a comunicação de massa era principalmente escrita, mas agora o custo de publicar vídeo e áudio ficou muito baixo. A escrita tem limites quanto ao que consegue explicar e com que facilidade, e é por isso que bons escritores historicamente tiveram grande influência. No mesmo intervalo de tempo, é possível transmitir mais significado por fala, som e sinais não verbais. A escrita é um formato excelente, mas, assim como a pintura continuou sendo um meio artístico diante da fotografia e da animação, acho que ela não é mais uma ferramenta de comunicação essencial que o público necessariamente precise aprender.
      O que importa, em vez disso, é a capacidade de pensar criticamente por conta própria, questionar as informações apresentadas e entender a matemática necessária para navegar pela vida. A necessidade de uma alfabetização ampla é um fenômeno relativamente recente, de alguns séculos, surgido quando o custo de publicar textos caiu, e meios mais eficazes, como fala e vídeo, estão ficando ainda mais baratos com a IA.
      Associar inteligência ou pensamento crítico à alfabetização é falho e, francamente, elitista; é apenas uma função da escolarização. No país onde cresci, o analfabetismo, especialmente entre os idosos, era um problema, não porque eles não tivessem aprendido direito na escola, mas porque simplesmente não puderam ir à escola. Vi muitos pensadores e inventores inteligentes analfabetos, e também muitas pessoas alfabetizadas burras. É um país maior e mais pobre que os EUA, mas seu processo político é mais robusto e a participação dos eleitores é maior. O problema dos EUA é que as pessoas têm oportunidades e mesmo assim não aprendem; a alfabetização é um indicador substituto fraco para outras habilidades necessárias à vida, e essa correlação ficará ainda mais fraca no futuro.
    • Fazendo o papel de advogado do diabo: por que isso importa? Se o objetivo da linguagem é a comunicação, então, quando as pessoas entendem e se sentem suficientemente compreendidas, os critérios clássicos de alfabetização podem não ser um indicador útil.
      O uso moderno da linguagem pode ter menos profundidade, mas compensa com concisão e clareza, e isso parece uma correção natural para a baixa relação sinal-ruído de um mundo altamente conectado. Não estou tentando negar o valor da alfabetização; questiono se a queda nas notas dos testes necessariamente significa perda desse valor. Na era da informação, a forma como a linguagem é usada e como as mudanças se espalham ficou completamente diferente, e é difícil saber se os testes tradicionais de alfabetização medem com precisão o papel que a alfabetização desempenha na vida das pessoas hoje. Antigamente, a escrita era principalmente feita por cartas, mas, na era da comunicação instantânea, a capacidade de transformar pensamentos rapidamente em palavras tornou-se relativamente mais importante do que a capacidade de encontrar a palavra perfeita.
  • A forma como isso foi noticiado aqui não é muito perspicaz, e os comentários também parecem seguir a tendência de cada um trazer a questão social que já detestava e atribuir a culpa a ela
    Esse sistema de pontuação é feito de modo que 500 seja a mediana da distribuição e 100 pontos correspondam aproximadamente a 1 desvio-padrão. A pontuação dos EUA em matemática é 517, abaixo dos 535 de quatro anos atrás. Se assumirmos que pontuações de QI são números inteiros, seria parecido com o QI ir de 105 para 103, mas fica ambíguo se isso é uma diferença real ou apenas variação normal entre provas. Não é uma medida que dá quase o mesmo resultado toda vez, como altura

    • Estão misturando casos individuais, como o “QI” de uma pessoa, com mudanças na média populacional
      Um indivíduo variar 2 pontos entre provas não é nada demais, mas se a média de QI de uma população caiu 2 pontos em determinado período, isso é motivo de preocupação
  • Acho interessante que a maioria dos comentários se concentre em raça e política, e que, pelo que vi, só um tenha citado redes sociais e celulares como possíveis fatores

    • Celulares são pequenos bolsos de dopamina que entregamos às crianças para que carreguem por aí e recebam “uma dose” sempre que precisarem. Parafraseando Scott Galloway
    • Todo mundo tem sua própria teoria de estimação sobre por que isso está acontecendo
      Não acho que seja uma tentativa de evitar responsabilidade ou racionalizar, mas sim de aplicar a própria visão de mundo e heurísticas de solução de problemas a propriedades “não explicadas” ou “emergentes” de um sistema complexo. Pessoalmente, acho que nem é necessário descobrir a causa. Se não baixarmos os critérios para entrar na série seguinte, no ensino médio e na universidade, o problema vai se corrigir sozinho, mesmo sem sabermos por quê
    • Considerando o público leitor daqui, quase certamente há um elemento de negação quanto à própria cumplicidade nesse problema
  • Não sei como é em outros países, mas minha filha do 8º ano disse que estava cansada de fazer provas sem impacto na nota e que iria se sair mal de propósito na prova de matemática iReady
    Meus filhos estão esgotados pelo excesso de provas e, do ponto de vista deles, parece que a escola valoriza mais as provas do que o aprendizado

    • Se a prova não conta para a nota, fico curioso para saber com base em que as notas são dadas
    • Meu filho não gosta da UI do IReady e acha que ela atrapalha na hora de fazer a prova
    • A escola poderia enfatizar mais para o grupo de alunos que o desempenho na prova importa para resultados como aulas de reforço em planos futuros de aprendizagem
    • O iReady era horrível
  • Acho interessante que apareçam tantos possíveis motivos diferentes nos comentários
    Depois da COVID, o maior problema nos estudos de matemática dos meus filhos foi que passaram a fazer os problemas apenas no computador, com quase nenhum incentivo para resolvê-los no papel. Eles ficam olhando para a tela, pensando qual seria o próximo passo, e depois tentam inserir no MathSpace. Eu gosto de matemática e, em geral, sou bom nisso, mas até eu, adulto, enlouqueceria se tentasse resolver tudo só de cabeça e na tela, sem alinhar números e operadores no papel, riscar termos simplificados e reagrupar o problema conforme meu entendimento muda. Nem consigo imaginar como isso é na cabeça de uma criança de 13 anos. Sempre pego papel e mostro como eu abordaria o problema, mas a criança não tenta fazer assim por conta própria. Ela prefere continuar pedindo dicas no site da calculadora DESMOS até que, na prática, o problema seja resolvido para ela. Quando dá para fazer isso, é difícil esperar compreensão e memorização reais, e a criança só quer terminar a lição de casa logo
    Acho que a adoção de tecnologia em sala de aula foi agressiva demais. É bom que cada vez mais tecnologia possa ser usada, mas a forma de criá-la e aplicá-la para produzir os melhores resultados ainda precisa amadurecer

  • O fato de que alunos no grupo de pior desempenho ficam ainda mais para trás é um tema tabu em muitos lugares, mas será que os filhos dos alunos de pior desempenho também não têm maior probabilidade de ter baixo desempenho?
    E talvez os piores em matemática não sejam necessariamente os piores em reprodução? Fico curioso se alguém se atreveu a coletar esse tipo de dado

    • Há bastantes estudos indicando que, quando o professor se concentra nos alunos de pior desempenho, o desempenho médio geral sobe
      Parece óbvio, mas, se deixados por conta própria, os professores ainda parecem dedicar tempo demais aos alunos de melhor desempenho. Foi essa a conclusão que ouvi em vários estudos de educação
    • Se isso for verdade, significa que o sistema escolar é péssimo. No fim, ele está jogando o trabalho de ensinar para os pais
    • Fico curioso para saber o que significa exatamente “talvez não sejam os piores em reprodução”. Por exemplo, você está falando de grupos religiosos?
    • Parece uma interpretação do tipo “Idiocracy era um documentário”
      É uma afirmação bem forte, e fico curioso se há fontes que a sustentem