Resultados de aprendizagem esperados. Pensamento crítico. Avaliação. Valor adicionado.
Estes são termos que, talvez tão recentemente como no início dos anos 2000, estariam na mente de relativamente poucos administradores universitários e universitários e membros da faculdade. Agora, no entanto, esses termos são um aspecto inevitável da vida para um número cada vez maior de indivíduos que ensinam – e aqueles que são responsáveis por garantir a qualidade do ensino – no ensino superior americano.
Supondo que outras universidades sejam como aquela em que eu ensino, os instrutores de praticamente todos os cursos devem coletar e reportar dados de avaliação de algum tipo, em relação ao grau em que os estudantes estão cumprindo metas de aprendizado específicas pré-especificadas nos programas de curso. As avaliações, que devem ir além das notas da letra dos alunos no curso, podem incluir trabalhos escritos, perguntas de exames, grupos focais ou pesquisas – tudo o que quantifica até que ponto os alunos estão alcançando os objetivos de aprendizagem do curso. Múltiplos modos de avaliação são considerados melhores do que os singulares.
O movimento para avaliar, quantificar e documentar a aprendizagem dos alunos – estimulado por agências de acreditação regionais que têm o poder de conceder ou negar contas limpas de saúde para as universidades – faz parte de um quadro de responsabilidade maior que permeia a sociedade americana. Não só os treinadores de esportes são julgados em seus registros de vitoria / perda e personalidades da televisão, em suas classificações de audiência. Hoje em dia, dificilmente pode ficar em um hotel, voar em uma companhia aérea, comer em um restaurante ou pegar um corte de cabelo (das franquias nacionais pelo menos), sem ser solicitado a completar uma pesquisa on-line, cujos resultados provavelmente serão usados pelo gerenciamento para avaliar o (s) empregado (s) com quem você interagiu.
Na medida em que os sistemas de responsabilização realmente melhorem a qualidade dos serviços prestados, eles devem ser bem-vindos. No entanto, muitos membros do corpo docente – é sensato que as avaliações realmente avaliem a aprendizagem dos alunos, frustradas por ter uma nova tarefa fazendo reivindicações sobre seu tempo e / ou preocupadas com a intrusão administrativa em como ensinam suas aulas – parecem menos entusiasmadas com o movimento de avaliação. David Glenn, escrevendo na Crônica do Ensino Superior, produziu vários artigos sobre avaliação e responsabilidade. Este em particular capta o sabor do debate.
O contributo mais recente para o debate vem dos sociólogos educacionais Richard Arum e Josipa Roksa, através do seu novo livro Academically Adrift: Limited Learning on College Campuses . Arum e Roksa relatam os resultados de um estudo longitudinal nacional de 2.362 alunos de primeiro ano do ensino médio em 24 instituições, que completaram, entre outras medidas, a Avaliação de Aprendizagem Colegiada (CLA) durante o período de outono de 2005 de suas escolas e em segundo ano seguem – na primavera de 2007. Os autores reconhecem que os "procedimentos nacionais de amostragem de probabilidade" não foram seguidos em toda a extensão, mas mostram que a demografia da amostra do estudo se assemelha à de outras bases de dados das matrículas da faculdade dos EUA.
O que é CLA? Arum e Roksa observam repetidamente que pretende avaliar "pensamento crítico, raciocínio complexo e escrita", em oposição ao conhecimento específico do curso. Os autores se concentram na "tarefa de desempenho" da CLA, descrevendo-a como uma atividade de escrita administrada por computador de 90 minutos, na qual os alunos respondem a hipotéticos cenários de decisão do mundo real. Os alunos recebem materiais suplementares, como artigos de jornal, estatísticas e memorandos relativos ao cenário. De acordo com o livro, o CLA pretende medir:
… o quão bem o aluno avalia a qualidade e a relevância das evidências, analisa e sintetiza dados e informações, extrai conclusões de sua análise e considera perspectivas alternativas (p.22).
As principais conclusões sobre a mudança no desempenho do CLA do estudante do primeiro ao segundo ano da faculdade incluíram:
(Um dos dados de reserva comuns analistas tem sobre estudar a mudança ao longo do tempo em resultados é "efeitos de teto" [isto é, alguns participantes pontuam tão alto na primeira avaliação, não há espaço para melhorar a segunda avaliação]. É principalmente o a maioria das universidades de elite que tem essa preocupação. A descoberta anteriormente citada sobre como os alunos perto do topo ainda melhorou e as análises adicionais apresentadas nas páginas 153-154 do livro parecem dissipar as preocupações sobre os efeitos do teto.)
Os autores também analisaram aspectos da experiência educacional que se correlacionaram com o desempenho do CLA no segundo ano, acima e além do que seria esperado do desempenho do primeiro ano dos alunos. Tomando emprestado da economia, tal abordagem é dito capturar o benefício de valor agregado de ter frequentado uma universidade. Exemplos de conclusões foram que a realização de cursos que exigem tarefas extensas de leitura e escrita foi associada a aumentos nos escores de CLA em segundo ano, enquanto as horas passadas a estudar com colegas apresentaram diminuição em tais pontuações (veja a Tabela A4.5 do livro).
Na sua conclusão, Arum e Roksa advertem contra os "esquemas de responsabilização de alto risco" que incide sobre o CLA e os instrumentos relacionados, o que pode implicar critérios de desempenho absolutos e sanções obrigatórias para o pessoal de instrução e supervisão quando os alunos não conseguem alcançá-los. Como eles argumentam:
… simplesmente não estamos em um estágio de conhecimento científico onde os resultados de aprendizagem dos estudantes universitários podem ser medidos com precisão suficiente para justificar a adoção de um sistema de responsabilidade coerciva sem reservas significativas (página 141).
Um artigo recente sobre avaliação co-autoria do Provost e Vice Provost for Planning and Assessment na minha universidade de origem, Texas Tech, está disponível aqui. Esses funcionários discutem o CLA e outras ferramentas possíveis para avaliar o desempenho dos alunos, com foco nas soluções que consideram melhores para o Texas Tech.
Uma triste despedida para um colega: Academia perdeu uma professora e pesquisadora apaixonada quando minha colega do Texas Tech, Sarah Kulkofsky, morreu em 13 de janeiro de 2011 aos 30 anos. O livro acima mencionado, Academically Adrift , concluiu convocando aqueles que estão no ensino superior para incutir um "amor ao longo da vida em seus alunos". Como os depoimentos dos estudantes e colegas de Sarah após sua aprovação foram claros, Sarah conseguiu espetacularmente nesta área.
