O terceiro ano da avaliação do TEF (Teaching Excellence and Student Outcomes Framework) teve início em janeiro deste ano. De acordo com o Gabinete para os Estudantes (OfS), a política — instituída pelo Ministério da Educação em 2016 — foi criada para ajudar os estudantes e garantir um ensino de alta qualidade: «Para além de ajudar os futuros estudantes a escolher onde estudar, o TEF também incentiva as instituições a trabalharem com os seus estudantes para identificar, perseguir e manter a excelência.»
E embora o TEF tenha suscitado grande controvérsia no ensino superior no Reino Unido e suscitado animosidade por parte de algumas IES (Instituições de Ensino Superior) devido ao receio de danos à sua reputação, a avaliação governamental das universidades sediadas no Reino Unido tem continuado com ampla participação.
Tem-se debatido qual será o impacto do TEF na escolha dos estudantes quanto à sua instituição de ensino. Embora ainda não seja claro, parece inicialmente que os estudantes internacionais estão a ser influenciados pelas classificações de ouro atribuídas, tal como observado pelo The Guardian. Especialmente as instituições com classificação de bronze e perfis internacionais menos pronunciados correm o risco de não serem escolhidas pelos estudantes internacionais.
UMA BREVE INTRODUÇÃO: O QUE É O TEF?
A avaliação do TEF é inicialmente medida por seis indicadores, resultando numa classificação de ouro, prata ou bronze, válida por um período de até 3 anos, enquanto uma classificação «provisória» está disponível para os prestadores de ensino com dados insuficientes. O painel responsável pela atribuição das classificações recebe também dados contextuais e um relatório escrito do prestador de ensino, a fim de informar melhor o painel no seu processo de avaliação.
O ponto central da avaliação são as experiências e os resultados de aprendizagem dos alunos proporcionados pelas instituições de ensino individuais, que são medidos por indicadores provenientes de diferentes fontes.
- O NSS (Inquérito Nacional aos Estudantes) fornece os três primeiros indicadores, com base nas perspetivas dos estudantes em três categorias diferentes: Qualidade do Ensino, Avaliação e Feedback e Apoio Académico.
- A quarta métrica é medida pelas taxas de retenção ou «não continuação» dos estudantes e provém de dados da HESA (Agência de Estatísticas do Ensino Superior) e do ILR (Registo Individualizado do Aluno).
- As duas últimas métricas provêm do DLHE (Destination of Leavers from Higher Education survey) e dizem respeito ao emprego dos licenciados e à complexidade do seu trabalho (seja este de nível de licenciatura ou não)
No ano letivo de 2017-2018, o TEF incluirá ainda uma avaliação ao nível da disciplina, a título de projeto-piloto.
OPINIÕES DOS ESTUDANTES SOBRE O TEF
A «experiência do aluno» é uma questão importante no ensino superior e não apenas para os alunos. A concorrência entre as instituições de ensino está a aumentar rapidamente, tornando cada vez mais os critérios orientados para o aluno no ensino superior fatores decisivos quando os alunos escolhem a sua futura IES.
E embora as universidades já tenham dedicado grande atenção à experiência do aluno, o foco poderá tornar-se ainda maior à medida que o TEF prossegue. E com razão.
Durante o verão de 2017, um consórcio de mais de 20 associações de estudantes reuniu-se e financiou um projeto de investigação sobre as opiniões dos estudantes relativamente ao termo «excelência no ensino», a ser desenvolvido pelo instituto de investigação europeu Trendence. Foram consultados quase 9000 estudantes de mais de 120 instituições de ensino sediadas no Reino Unido, tornando-o «o maior projeto de investigação do Reino Unido até à data sobre as opiniões dos estudantes relativamente aos indicadores do TEF».
Embora os estudantes pareçam discordar da importância atribuída a certos indicadores do TEF, colocando o emprego dos licenciados como o menos importante dos sete fatores de um ensino de excelência, 84% dos estudantes consultados manifestaram um forte apoio a um programa governamental destinado a melhorar e garantir a qualidade do ensino.
Assim, embora os indicadores e métricas específicos do TEF continuem a suscitar controvérsia, a necessidade geral de uma avaliação da «excelência do ensino e dos resultados dos estudantes» parece ser apoiada pelos corpos estudantis das IES no Reino Unido.
No que diz respeito ao facto de o emprego dos licenciados ter sido classificado como o menos importante dos sete fatores no inquérito, gostaríamos de tecer uma observação. Embora concordemos que o emprego futuro não é necessariamente uma medida adequada da qualidade do ensino, é, no entanto, uma parte importante da educação como um todo: dotar os estudantes das competências adequadas para os futuros locais de trabalho é, sem dúvida, parte da responsabilidade das IES. Quando a noção de emprego futuro é apresentada a partir desta perspetiva, os corpos discentes das IES sediadas no Reino Unido classificam a sua relevância como muito mais elevada, tal como demonstrado no relatório de 2017 «Student Digital Experience Tracker», elaborado pelo JISC. 82% dos alunos consultados nas IES consideraram que «as competências digitais serão importantes no local de trabalho», mas apenas metade deles concordou que o seu curso os preparava para um local de trabalho digital. Tendo isto em conta, existe um forte incentivo para exercitar e melhorar o conjunto de competências digitais dos estudantes durante a sua formação.
O APELO A UMA ABORDAGEM DIGITAL DA EDUCAÇÃO
Já em 2015, o relatório «Make or Break: The UK’s Digital Future» da comissão especial da Câmara dos Lordes sobre competências digitais abordou abertamente a necessidade de adaptação às tecnologias digitais como parte da condição humana: «As competências digitais — as competências necessárias para interagir com as tecnologias digitais — são competências para a vida, necessárias para a maioria dos aspetos da vida».
E, para muitos de nós, estas competências são aplicadas em quase todos os aspetos da nossa vida quotidiana. Quando acordamos, é graças ao alarme definido no nosso iPhone, e não a um despertador mecânico. Enquanto tomamos o nosso café da manhã (que foi preparado numa máquina de café ligada à Internet, para que recebamos notificações quando for necessário limpá-la), lemos as notícias num tablet ou computador. Se o nosso carro avariar, usamos o telemóvel para verificar os meios de transporte público mais próximos. Enquanto estamos sentados no autocarro ou no metro, verificamos o nosso e-mail ou a nossa conta do Facebook.
Estas são apenas algumas das formas como as nossas vidas dependem das competências digitais. Os dispositivos digitais são utilizados em todo o lado: nos cuidados de saúde, na engenharia, nos meios de comunicação social, no design, na indústria transformadora – é difícil imaginar um setor onde os dispositivos digitais não sejam utilizados e a digitalização não seja relevante. E são estes os setores para os quais a maioria dos futuros estudantes das instituições de ensino superior se dirige.
De acordo com o relatório do JISC «Student Digital Experience Tracker», cerca de 90% de todos os novos empregos exigem boas competências digitais.
PROPORCIONAR QUALIDADE NO ENSINO E NA AVALIAÇÃO
A expansão das capacidades digitais das IES não é apenas uma medida para aumentar as perspetivas de emprego dos futuros estudantes. As ferramentas digitais estão destinadas a desempenhar um papel cada vez mais importante na promoção do imperativo académico. Na verdade, na maioria dos processos no domínio da educação, a digitalização já está presente. As situações de ensino são muito diferentes das de há apenas alguns anos.
Os materiais utilizados, tais como enciclopédias, artigos e casos, estão cada vez mais disponíveis online em vez de em formato impresso. Os formatos também se diversificaram, tornando o áudio, o vídeo e as aplicações móveis viáveis para fins de ensino e aprendizagem. O próprio ensino é normalmente conduzido com a ajuda de recursos digitais, tais como quadros interativos ou apresentações em PowerPoint. Até mesmo a estrutura em torno do ensino e da aprendizagem foi digitalizada com a utilização de VLEs (Ambientes Virtuais de Aprendizagem).
Os métodos dos estudantes também mudaram. Enquanto antes tomavam notas em papel, agora utilizam cada vez mais computadores ou tablets. Para muitos estudantes, o computador é também a sua principal ferramenta de leitura. Por isso, as competências mudaram e evoluíram para o domínio digital, o que significa que os estudantes têm uma caligrafia menos legível e se habituaram a utilizar auxiliares de escrita e ortografia nos seus computadores. Estão também cada vez mais expostos e utilizam outros recursos na Internet, tais como fóruns de discussão sobre as disciplinas, ajuda ao estudo, enciclopédias colaborativas, fóruns de testes e exercícios, canais do YouTube do tipo «Como fazer» e muito mais.
A EDUCAÇÃO BASEADA NA INVESTIGAÇÃO PRESSUPÕE A DIGITALIZAÇÃO
No entanto, de longe, uma das áreas mais digitalizadas no âmbito da educação é a investigação. Por exemplo, as redes sociais e as comunidades online permitiram aos investigadores superar o desafio da colaboração a grandes distâncias, criando redes de investigação multi-institucionais capazes de partilhar conhecimentos e recursos, de modo a aperfeiçoar e melhorar o seu foco na aplicação de investigação em grande escala e com massa crítica aos desafios do mundo real.
A documentação digital dos resultados da investigação e a disponibilização online dos dados de investigação aumentaram significativamente a transparência na investigação, tornando as conclusões da investigação e os conjuntos de dados completos que as acompanham mais acessíveis tanto a investigadores como a estudantes.
Os avanços tecnológicos afetaram igualmente a forma como a investigação pode ser conduzida, por exemplo, tornando a investigação in silico mais plausível e acessível aos departamentos de investigação. Estes podem agora utilizar simulação computacional para avaliar experiências com enormes quantidades de dados de forma muito mais rápida e económica do que através da experimentação física – e sem riscos. Na Universidade de Columbia, isto levou – entre outras coisas! – à criação do Illustris, uma simulação computacional realista da evolução do universo.
Os exemplos são abundantes. O ponto principal é que a investigação é uma das áreas mais digitalizadas no âmbito da educação – e por boas razões. Ao alinhar o ambiente de investigação com as tendências digitais e ao aplicar soluções digitais às dificuldades do mundo real, os departamentos de investigação das instituições de ensino superior aumentaram consideravelmente tanto a sua produção, como a sua eficiência e a sua capacidade de colaboração.
ALINHAMENTO DO ENSINO E DOS EXAMES
Proporcionar a melhor educação, tanto apoiada como baseada em investigação sólida, é de importância crucial para praticamente qualquer prestador de ensino. Especialmente nas IES, onde a educação se baseia, na maioria das vezes, no ensino fundamentado na investigação. Mas, quando pensamos nisso, há algo que não é totalmente satisfatório nessa perspetiva.
Enquanto os processos de ensino e aprendizagem nas IES se estão a tornar rapidamente digitais, o processo de exames e avaliação é frequentemente deixado completamente para trás. Isto coloca um problema grave, porque «ensino e aprendizagem» e «exames e avaliações» não podem ser vistos como tarefas separadas. Fazem parte de um único processo, afetando-se continuamente um ao outro.
Embora os educadores possam desejar que o seu ensino e os resultados de aprendizagem definidos determinem a abordagem dos alunos à aprendizagem, é amplamente reconhecido que, quando confrontados com um currículo, os alunos adaptam a sua abordagem de aprendizagem de acordo com o que será avaliado. Isto não é intrinsecamente prejudicial; na verdade, é uma reação totalmente compreensível quando confrontados com uma circunstância desafiante, que é essencialmente o que uma avaliação representa. A reação é simplesmente parte de ser um aluno eficiente, focado na resolução das tarefas apresentadas.
No que diz respeito às abordagens de aprendizagem, distinguimos entre uma abordagem profunda e uma abordagem superficial[1]. A diferença entre elas é medida qualitativamente no que diz respeito à compreensão e pode ser vista como posicionada de forma diferente na taxonomia SOLO.
Adotar uma abordagem superficial significa procurar reproduzir determinadas informações para satisfazer um conjunto de exigências externas — por exemplo, um exame. Ao adotarem uma abordagem superficial, os estudantes posicionam a sua abordagem de aprendizagem nos níveis iniciais da taxonomia — o que Biggs e Collis designam por compreensão unistrutural e multistrutural — e concentram-se principalmente na identificação e memorização de factos e conceitos básicos. Adotar uma abordagem profunda à aprendizagem significa pensar criticamente sobre o material recentemente aprendido, compreender o contexto da informação e criar novos significados a partir dela. Neste caso, a abordagem dos alunos à aprendizagem poderá começar nos níveis iniciais da taxonomia, mas elevar-se-á para os níveis superiores — compreensão relacional e compreensão abstrata alargada, nos termos de Biggs e Collis —, centrando-se em estabelecer ligações, analisar relações e, em última análise, formular novas ideias.
Para apoiar e incentivar os estudantes na escolha da abordagem de aprendizagem pretendida, os resultados de aprendizagem definidos devem estar alinhados com as práticas e processos de aprendizagem que promovem essa abordagem específica, seja ela profunda ou superficial. E uma vez que um exame e a avaliação subsequente constituem a medida prática do sucesso dos resultados de aprendizagem, estes devem estar alinhados com os métodos utilizados e as práticas aplicadas no processo de aprendizagem. Na sua essência, garantir o alinhamento dos métodos e práticas no ensino e na avaliação subsequente significa assegurar que os estudantes vivenciam circunstâncias comparáveis, tanto quando o conhecimento é inicialmente compreendido como quando é testado. Ao não o fazer, as instituições de ensino superior estão a criar condições desfavoráveis para o sucesso tanto dos seus estudantes como dos seus resultados de aprendizagem.
Um exemplo:
Um docente planeou uma disciplina de História sobre a Guerra Fria com o seguinte resultado de aprendizagem: «Os alunos irão adquirir conhecimentos e ferramentas conceptuais para explicar e analisar a história e os principais acontecimentos da Guerra Fria, desde a sua conceção no início da década de 1940 até ao colapso da URSS em 1991. Os alunos serão capazes de debater questões e debates historiográficos no âmbito da disciplina e relacionar a natureza da Guerra Fria com os recentes desenvolvimentos políticos globais, bem como refletir sobre diferenças e semelhanças.»
O docente utiliza uma combinação de meios, tais como imagens históricas e gravações de vídeo e áudio de alguns eventos históricos. O material didático escrito consiste tanto em livros físicos, enciclopédias online como em PDFs de artigos de investigação relevantes, disponibilizados através da plataforma de aprendizagem virtual (VLE) da instituição.
O exame? Um questionário de escolha múltipla num Scantron. Como acha que os alunos irão abordar este curso se souberem que este é o formato do exame? Dificilmente de forma aprofundada, apesar de parecer muito adequado para o resultado de aprendizagem definido.
De acordo com o relatório de 2017 «Student Digital Experience Tracker», elaborado pelo JISC, 88% dos estudantes do ensino superior utilizam computadores portáteis pessoais para aceder à aprendizagem
Embora fictício e hiperbólico, o exemplo ilustra, no entanto, os problemas decorrentes da falta de alinhamento na educação moderna. Pois como é que alinhamos eficazmente os resultados de aprendizagem baseados em métodos e estratégias de aprendizagem influenciados pelo digital com métodos analógicos nos exames? Parece ser uma abordagem cada vez mais inválida para uma educação de qualidade. Ao aplicar métodos específicos no ensino dos alunos, as competências que estes adquirem estão relacionadas com esses métodos. Assim, para testar adequadamente as suas competências, devemos igualmente utilizar métodos relacionados para as avaliar.
De acordo com o relatório de 2017 «Student Digital Experience Tracker», elaborado pelo JISC, 70% dos estudantes do ensino superior concordam que «quando a tecnologia digital é utilizada no seu curso, sentem-se mais independentes na sua aprendizagem e conseguem integrar a aprendizagem nas suas vidas com maior facilidade».
Voltando ao exemplo, um formato de exame digital permitiria ao docente criar um exame que não só variasse os formatos para incluir tanto a redação como as perguntas de escolha múltipla, mas também incluísse os meios de comunicação utilizados nas situações de ensino no próprio exame. Torna-se possível alinhar os métodos que os alunos utilizaram na sua compreensão inicial da matéria; a forma como processaram os dados relevantes; a maneira específica como analisaram filmes e excertos de áudio; a comparação de provas fotográficas com relatos históricos; a reflexão que realizaram utilizando diferentes fontes e diferentes tipos de meios de comunicação.
Ao estabelecer linhas mais claras entre os métodos aplicados no ensino da matéria e a forma como a compreensão dos alunos sobre a mesma é avaliada, não só consegue garantir resultados de aprendizagem mais bem-sucedidos, como também assegura uma maior transparência nos seus exames.
A digitalização é uma necessidade nas IES
Poderá haver muitas formas de melhorar a qualidade do ensino ou outros meios que possam melhorar significativamente o modelo de avaliação tradicional, mas a necessidade de mudança e adaptação digitais nas IES é inegável.
No relatório da Trendence, 86% dos estudantes indicaram que as tecnologias da informação deveriam ser um fator decisivo na avaliação da qualidade do ensino.
A criação de uma infraestrutura digital em torno dos exames e avaliações da sua instituição de ensino irá, muito provavelmente, melhorar as condições de avaliação e os resultados de aprendizagem dos alunos. Ao disponibilizar instrumentos de exame digitais para apoiar os métodos aplicados na educação moderna e ferramentas como as Rubricas para estruturar e formalizar o alinhamento da avaliação com os resultados de aprendizagem definidos, uma plataforma digital de exames e avaliações pode ajudar a (re)construir a ponte entre a aprendizagem e os exames.
Com uma estrutura digital em torno do ambiente de avaliação das instituições de ensino superior, torna-se mais fácil testar as competências académicas dos alunos em circunstâncias comparáveis e com os mesmos métodos com que essas competências foram inicialmente adquiridas. Com esta configuração, os exames passam a fazer parte da experiência de aprendizagem dos alunos.
UM BREVE RESUMO
Para concluir, eis um breve resumo dos pontos que abordámos:
- Para garantir maiores probabilidades de emprego, as IES precisam de dotar os estudantes de competências digitais, bem como de exercitar e aperfeiçoar esse conjunto de competências digitais.
- Embora a maioria das IES esteja bem encaminhada para criar um quadro totalmente digital em torno da sua instituição e do seu processo educativo, a parte relativa aos exames e à avaliação deste processo de digitalização é gravemente subvalorizada.
- Garantir que os exames e as avaliações sejam também digitais criará uma base mais sólida para alinhar o ensino com os resultados de aprendizagem e o exame final, resultando, em última análise, numa maior qualidade do ensino e da aprendizagem.
[1] The Role of Metalearning in Study Processes, British Journal of Educational Psychology, Biggs, John B., 55, pp. 185-212, novembro de 1985
MANTENHA-SE ACTUALIZADO SOBRE OS ÚLTIMOS DESENVOLVIMENTOS
PERGUNTAS FREQUENTES
O TEF é uma avaliação liderada pelo governo do Reino Unido que avalia a qualidade do ensino e os resultados dos estudantes no ensino superior. As instituições recebem classificações de Ouro, Prata ou Bronze com base em indicadores relacionados com a qualidade do ensino, avaliação e feedback, retenção de estudantes e emprego dos licenciados.
A avaliação desempenha um papel central na definição da forma como os estudantes aprendem. Se os exames e as avaliações não estiverem alinhados com as práticas de ensino digitais e os resultados de aprendizagem, a eficácia global do ensino, e consequentemente o desempenho no TEF, podem ser reduzidos.
Embora os estudantes possam debater a importância das métricas individuais do TEF, a investigação revela um forte apoio dos estudantes a iniciativas que melhoram a qualidade do ensino. Muitos estudantes também reconhecem as competências digitais como essenciais para o futuro emprego.
O ensino, a aprendizagem e a investigação já estão altamente digitalizados, enquanto os exames continuam frequentemente a ser realizados em papel. Esta discrepância cria um desfasamento. Uma abordagem digital garante que os métodos utilizados para ensinar os estudantes se reflitam também na forma como os seus conhecimentos são avaliados.
Os exames digitais permitem aos docentes avaliar os alunos utilizando as mesmas ferramentas, meios e métodos aplicados durante o ensino, promovendo uma aprendizagem mais profunda, uma maior transparência e uma avaliação mais autêntica das competências e da compreensão dos alunos.
A avaliação digitalizada ajuda as instituições a alinhar os resultados de aprendizagem com as práticas de ensino modernas, a desenvolver as competências digitais dos estudantes e a integrar os exames na experiência de aprendizagem, contribuindo, em última análise, para uma maior qualidade do ensino e melhores resultados dos estudantes, tal como incentivado pelo TEF.