AVALIAÇÃO DIGITAL: TRANSFORMAÇÃO RÁPIDA
CONTEXTO
Fazer a avaliação da forma correta é crucial para qualquer universidade. Na University College London (UCL), onde o período de exames contava com 87 000 candidatos, o volume é enorme; por isso, quando a COVID-19 surgiu e a universidade entrou em confinamento, a UCL tomou a decisão rápida de mudar para uma plataforma de avaliação digital.
Para a transição inicial, utilizou o seu ambiente de aprendizagem virtual (VLE), o Moodle, mas assim que o período principal de exames de 2020 terminou, a UCL tomou uma decisão ousada: realizaria todos os exames e avaliações online numa nova plataforma no ano letivo de 2021. A UCL selecionou a UNIwise como seu parceiro preferencial e lançou a sua própria plataforma, denominada «AssessmentUCL», para todos os estudantes na primavera de 2021.
Segue-se uma conversa com Derfel Owen (DO), então Diretor de Mudança e Melhoria, Joanne Moles (JM), então Responsável pela Realização de Avaliações e Plataformas, e Simon Walker (SW), então Diretor de Desenvolvimento de Programas.
O CAMINHO PARA A AVALIAÇÃO DIGITAL
DO: A Covid foi o principal catalisador do AssessmentUCL (AUCL). Já há algum tempo que se travavam inúmeras discussões sobre a transformação das práticas de avaliação, bem como sobre a digitalização das práticas de avaliação, ensino e aprendizagem. Estávamos a avançar lentamente nessa direção e encontrávamo-nos num ponto em que estávamos prontos para começar a experimentar o mercado, mas o momento decisivo surgiu quando a pandemia nos atingiu. Tomámos uma decisão muito rápida de encerrar o campus e mudar, da noite para o dia, para a oferta digital. Carregámos no acelerador e simplesmente dissemos: «vamos em frente, não vamos avançar aos poucos para o próximo ano.» Tomámos uma decisão bastante ousada.
JM: A intenção sempre foi implementar a avaliação digital (DA), mas o ritmo teria sido mais lento e a escala muito menor — teríamos vindo a introduzi-la gradualmente através de projetos-piloto — a COVID acelerou esse processo.
SW: É claro que também vínhamos a discutir o facto de continuarmos a colocar os alunos em grandes salas de exame e a obrigá-los a escrever durante horas em papel até lhes doerem os braços. Não fazia qualquer sentido, mas a questão era: «o que fazemos a esse respeito?» Do ponto de vista educativo, questionávamo-nos: «por que razão continuamos a avaliar através de exames quando o mundo não funciona dessa forma específica?» Percebemos que tinha de haver novas formas de avaliação. Quando começámos a analisar as diferentes plataformas, percebemos que há muito que se pode fazer – vídeo, podcast, trabalho em equipa. A lista era interminável.
DO: O espaço estava lá para ser ocupado. Aproveitámos essa oportunidade.
UMA ABORDAGEM "BIG BANG
DO: Tivemos uma conversa em que eu disse: «Este ano não vamos fazer um projeto-piloto. Vamos fazer tudo.» Sabíamos que éramos capazes porque já o tínhamos feito uma vez com o VLE, e esse não tinha sido concebido para a avaliação em grande escala. Então, por que não teríamos a confiança necessária para percorrer todo o caminho com um envolvimento realmente alargado em toda a instituição, utilizando uma plataforma especificamente concebida para a avaliação? Isso significaria cerca de 50 000 exames realizados no verão e várias outras avaliações realizadas ao mesmo tempo. Se não tivesse havido uma pandemia, provavelmente teríamos realizado muitos projetos-piloto com entusiásticos defensores em toda a universidade, o que é obviamente importante. Mas, em vez disso, adotámos uma abordagem em que abrangemos todos os cantos da universidade de imediato. Não houve nenhuma parte da UCL que não tenha interagido com a DA ou a AUCL.
JM: Não estávamos apenas a conduzir o projeto a partir de uma única área. A avaliação digital (DA) foi fundamental para a formação, o ensino e a integração. A realização dos exames, no entanto, envolvia sobretudo regulamentação e execução. Do ponto de vista da execução, era essencial que as decisões fossem tomadas e que nos mantivéssemos fiéis a elas.
SW: Avançámos juntos, como uma frente unida na universidade, em direção a tudo aquilo que há muito queríamos fazer.
MUDANÇA DE PRÁTICAS E CULTURA
SW: O maior obstáculo que enfrentámos no âmbito académico foi a cultura. Foi aí que surgiu o verdadeiro interesse. Como é que se muda essa mentalidade quando se tem académicos de sucesso que, na sua maioria, nunca utilizaram a avaliação digital? Eles estão bem experientes na sua própria área – entretanto, surge esta incrível intervenção de mudança e tenta-se convencer as pessoas a avançar e a mudar, obviamente com algum grau de evidência.
Felizmente, a UCL investiu enormes recursos nesta mudança. Conseguimos contratar consultores dedicados à avaliação digital – uma equipa completa de pessoas – que trabalharam com os nossos consultores de educação digital e os nossos consultores pedagógicos, a par dos tutores do corpo docente – criando equipas grandes e robustas. Se um docente afirmasse que uma avaliação não estava a funcionar, ou que precisava de ter um determinado formato para preparar os alunos para o mundo pós-licenciatura, tinha um local a que podia recorrer para obter ajuda.
DO: É realmente importante compreender que a digitalização da avaliação, por si só, não é uma solução. Ainda tivemos de alterar as práticas associadas a ela, a experiência dos alunos, o volume e a natureza da avaliação e a utilidade do feedback. Havia uma necessidade constante de trabalhar com os nossos parceiros de DA para encontrar soluções novas e diferentes que ajudassem os nossos colegas académicos em qualquer parte do percurso de avaliação com que pudessem estar a ter dificuldades e lhes transmitissem a certeza de que estamos a melhorar a situação para eles.
CONSELHOS PARA INSTITUIÇÕES QUE ESTÃO A CONSIDERAR A MUDANÇA PARA O DIGITAL
JM: A comunicação tem de ser abrangente, tanto para o pessoal como para os estudantes. As reuniões abertas são habituais na UCL e são úteis porque constituem uma forma rápida de falar com muitas pessoas. Uma das lições que aprendemos é que é necessário acertar na comunicação à primeira tentativa; caso contrário, poderá ser alvo de críticas relativamente às políticas mais tarde.
SW: Incentivo constante – é assim que a UCL funciona. Sempre, sempre através de uma consulta mais ampla – não é uma universidade gerida de forma hierárquica e isso é benéfico, em oposição a ter alguém a tomar uma decisão desinformada e a dizer: «desculpem, mas é assim que vai ser.»
O QUE FAZER: É essencial ter um plano. Tome as decisões importantes com antecedência e comunique-as; depois, seja claro com os colegas sobre os pontos que ainda estão abertos a discussão. Nós realmente entramos no ritmo de fazer isso.
É muito útil reunir uma grande comunidade de pessoas e fazer com que os colegas se destaquem mutuamente o que consideram ser o tipo certo de compromisso. É necessário fazer com que as pessoas compreendam que, numa organização grande e complexa, quando se olha a partir do seu próprio pequeno buraco, tudo parece muito simples, mas quando se vê que há outras 200 pessoas a espreitar dos seus buracos, percebe-se: «Está bem, vão ter de ser feitos alguns compromissos para que possamos avançar.»
JM: Eu diria também que é importante utilizar os dados que se recolhem. Demos especial atenção às questões dos estudantes. O que isso nos permitiu fazer pela primeira vez foi quantificar o que eram, na verdade, os «ruídos» que se faziam ouvir. Se receber cinco ou dez e-mails, o problema parece enorme, mas quando se tem dados, percebe-se que o problema afeta apenas algumas pessoas. Isto ajudou-nos imenso na nossa revisão regulamentar.
Diria também que ter o empenho institucional da UCL e de todas as divisões foi fenomenal. Parabéns à liderança sénior por investir na transformação. Não teria sido possível sem o investimento desses decisores-chave e o apoio da direção. Esse foi provavelmente o maior fator de influência para a mudança.
A IMPORTÂNCIA DE UMA PARCERIA FORTE
SW: Tínhamos uma parceria dentro da instituição e vimos a UNIwise como mais um parceiro. Havia um sentimento de igualdade, avançámos todos juntos, consultámo-nos mutuamente e levámo-nos a sério uns aos outros.
DO: Havia uma comunicação quase diária com a UNIwise. Inicialmente, tentámos transmitir que somos uma instituição de grande dimensão, que estamos a abranger todos os departamentos e que iremos tocar em áreas da universidade às quais nunca foram expostos. Sentiu-se realmente que, a cada passo do caminho, ambos estávamos totalmente empenhados em oferecer a melhor solução possível aos estudantes.
PERGUNTAS FREQUENTES
QUER ENTRAR EM CONTACTO COM UM ESPECIALISTA?
Entre em contacto connosco e marque uma demonstração para saber mais sobre como a UNIwise pode apoiá-lo na sua jornada de avaliação digital.