A experiência da Imperial College Business School na implementação do WISEflow

A Imperial College Business School, em Londres, Reino Unido, é consistentemente classificada entre as melhores escolas de gestão do mundo, oferecendo programas de MBA, MSc e de formação executiva, bem como licenciaturas duplas em colaboração com os departamentos do Imperial College.

A Imperial College Business School realizou um projeto-piloto em 2016 e expandiu-se para mais de 70 exames com 1600 alunos em 2020.

Antecedentes e contexto

A Imperial College Business School tinha iniciado um programa de MBA global em 2015; era necessária capacidade de avaliação digital para oferecer uma experiência totalmente online. O WISEflow foi escolhido em 2016 após um processo de aquisição. O projeto-piloto inicial decorreu no ano letivo de 2016/2017 com o Mestrado em Alterações Climáticas, Gestão e Finanças. O exame realizou-se no campus utilizando o navegador de modo de isolamento, com cerca de 40 estudantes, e o projeto foi um sucesso.

A expansão do projeto-piloto para o modelo «Traga o Seu Próprio Dispositivo» (BYOD) foi adiada até que fosse possível financiar um gestor de projeto dedicado. Emma Stoakes juntou-se ao projeto em 2019, e um exame bem-sucedido da escola de verão, composto inteiramente por perguntas de escolha múltipla (MCQs) e com 70 alunos, teve lugar em 2019

Segue-se um relato do projeto WISEflow no ICBS, da autoria de Emma Stoakes, Gestora de Exames e Avaliação e Responsável pelo Projeto de Avaliação Digital (Faculdade de Gestão).

"Estávamos a planear expandir para 14 exames BYOD em várias turmas de mestrado na sessão de exames de abril de 2020, desenvolvendo a nossa utilização para incluir respostas escritas, uso de anexos, perguntas de preenchimento de lacunas, estudos de caso e classificação na plataforma. A equipa de exames e avaliação tinha participado numa formação personalizada sobre funções de utilizador, em preparação para os exames da primavera, e realizámos sessões de formação presenciais para os alunos, aos quais também foi prestada assistência em caso de quaisquer problemas com o navegador durante o confinamento. Eles tiveram acesso a um teste de demonstração personalizado que lhes mostrou como utilizar os tipos de perguntas mais comuns, e planeámos sessões de atendimento sem marcação para quem tivesse quaisquer outras questões. Íamos também alargar a nossa formação de vigilantes. Tudo parecia estar a correr bem. E então chegou o confinamento."

"Os alunos foram para casa. Estávamos a meio do período de exames da área de Finanças e estavam previstos três testes de escolha múltipla para a semana seguinte ao anúncio do confinamento. O nosso principal período de exames aproximava-se em abril. Por outras palavras, precisávamos de um plano."

“Como a disciplina de Finanças estava a meio do período de exames, não havia tempo para qualquer formação sobre o WISEflow, pelo que utilizámos a nossa plataforma de ensino virtual (VLE). Esta foi bastante fácil de configurar, mas a pontuação e a correção foram bastante laboriosas, e havia muitas outras verificações administrativas que precisavam de ser realizadas. Na sequência do sucesso do nosso projeto-piloto da Escola de Verão, decidimos realizar os testes de escolha múltipla previstos utilizando a plataforma WISEflow, como as nossas primeiras avaliações cronometradas à distância de sempre, uma vez que estávamos confiantes de que os alunos iriam considerar as perguntas de escolha múltipla no WISEflow intuitivas. No fim de semana anterior a esses testes, realizámos sessões de formação sobre o WISEflow, incluindo a produção de vídeos sobre como aceder e utilizar a plataforma. Durante os testes, prolongámos facilmente o tempo de exame para quaisquer alunos que tivessem dificuldades; no final, todos os que realizaram o exame na semana seguinte conseguiram concluí-lo. Além disso, quando analisámos os resultados, não houve indícios evidentes de fraude ou conluio."

"Para o período de exames da primavera, a maioria dos alunos que se apresentaram aos exames já tinha recebido formação sobre o WISEflow. Decidimos não utilizar o navegador bloqueado, porque não teríamos qualquer supervisão ou controlo sobre a utilização de dispositivos adicionais e porque esta opção também nos proporcionava a flexibilidade de permitir que os alunos escrevessem à mão gráficos e equações e os carregassem como anexos. Como resultado, todos os exames puderam ser transferidos para o WISEflow, mesmo aqueles com grande componente matemática. Foi comunicado aos alunos que estes seriam exames à porta fechada e que se esperava que os alunos agissem com integridade académica; informámo-los de que seriam analisadas amostras através do Turnitin. Também concedemos a todos os alunos um tempo adicional de 30 minutos para o exame à distância, a fim de cobrir o tempo de envio e quaisquer outras questões."

"Além disso, decidimos utilizar a funcionalidade de mensagens instantâneas para informar os alunos quando o período normal de exames tivesse terminado e incentivá-los a começar a enviar e a verificar os seus trabalhos. Criámos contas de e-mail de assistência técnica para questões e uma página de informação sobre o WISEflow no nosso ambiente virtual de aprendizagem (VLE). Também realizámos algumas reuniões abertas em substituição das sessões de formação, nas quais os alunos podiam enviar perguntas antecipadamente. Formámos os nossos alunos de licenciatura no WISEflow à distância, uma vez que não tinham tido essa oportunidade no campus antes do confinamento. Decidimos também que a correção seria realizada no WISEflow, pelo que foram elaboradas orientações de formação para ajudar o corpo docente, incluindo uma página do WISEflow destinada ao corpo docente."

"Em retrospetiva, assim que os exames terminaram, pudemos constatar que os alunos estavam bem preparados para utilizar o WISEflow. A funcionalidade de mensagens instantâneas revelou-se extremamente útil e funcionou bem na comunicação com os alunos. A equipa de apoio da UNIwise foi fantástica e ajudou-nos em tudo o que parecia um pouco incerto. O corpo docente apreciou não ter de descodificar a caligrafia. No geral, foi um grande sucesso! Houve, naturalmente, alguns problemas, dado o curto prazo que tivemos para resolver tudo isto. Tal como todos os outros, não tínhamos controlo sobre o cenário remoto – a conectividade dos alunos, as VPNs ou os bloqueadores de anúncios. Também tivemos dificuldades em ajudar alguns alunos quando não conseguíamos ver os seus ecrãs. Recebemos muitos e-mails após os exames de alunos ansiosos a pedir-nos para verificar se os seus envios tinham sido recebidos. Foi um batismo de fogo para alguns! A interface do aluno é excelente, e o bloco de notas, o marcador e as ferramentas de acessibilidade para dislexia são realmente bons. Do ponto de vista do aluno, tudo é bastante fácil. O que foi mais desafiante foi tentar antecipar o que funcionaria para os avaliadores. A equipa responsável pelos exames criou os exames para o corpo docente e tomou decisões durante a sua configuração que resultaram numa experiência de avaliação mista para o corpo docente. Também observámos uma quantidade bastante elevada de conluio e plágio em comparação com a avaliação presencial no campus, e os regulamentos da faculdade na altura eram um pouco vagos quanto às orientações sobre como lidar com isso. No entanto, muitas destas questões eram comuns a todas as plataformas de avaliação da faculdade e, no geral, o WISEflow teve um desempenho realmente bom, dadas as circunstâncias."

"Com a nossa próxima série de exames em junho de 2020, transferimos a maioria dos exames que estavam no nosso VLE para o WISEflow; iremos mantê-los na plataforma daqui em diante até ao regresso total ao campus, altura em que serão realizadas discussões sobre BYOD, ensino à distância e exames em papel."

"Tínhamos planeado realizar 13 exames no WISEflow, mas já realizámos 74 na plataforma, o que é muito mais do que esperávamos e representa mais de 8 000 respostas, sem contar com todas as repetições de exames que tivemos durante o verão."

"Solicitámos feedback aos alunos para que pudéssemos introduzir melhorias para o nosso novo grupo de alunos. Dispomos agora de um vídeo de apresentação novo e mais aperfeiçoado sobre o WISEflow; antecipámos a formação para uma data mais próxima dos exames e fomos claros com os alunos quanto ao que podem esperar. Estamos a formar os alunos sobre como citar fontes nos exames e estamos a utilizar a "capa" do exame para que os alunos concordem com a nossa declaração sobre plágio. No que diz respeito ao corpo docente, o nosso Vice-Reitor para a Política Educativa está a fornecer orientações sobre como elaborar exames para realização à distância. Criámos também um grupo de trabalho do corpo docente e colaborámos com eles para produzir novas orientações sobre a configuração da avaliação e um modelo de exame que inclui opções de configuração comuns, para que possam indicar facilmente as suas preferências à equipa responsável pelos exames, ao mesmo tempo que fornecem o conteúdo do exame."

"Para quem pretende realizar exames no WISEflow, diria que é necessário considerar todas as etapas e dedicar algum tempo a experimentar o sistema. Eu criaria fluxos simulados e os percorreria na perspetiva de um aluno, de um avaliador – todas as etapas, todas as funções. É necessário compreender as complexidades do sistema, o que ele pode fazer e quais as opções disponíveis – e, em seguida, garantir que as suas decisões funcionam da melhor forma possível para os seus utilizadores."

"Foi uma curva de aprendizagem íngreme, mas nem acredito que passou menos de um ano desde que realizámos os exames da escola de verão. Passámos de realizar um exame de escolha múltipla com 70 pessoas para realizar 74 exames com 1600 alunos, em diferentes formatos, em menos de um ano. Tivemos de ser realmente ágeis."

"Tem sido também fantástico ter a equipa de apoio da UNIwise à nossa disposição. Adoramos a equipa da Zendesk! São realmente excelentes a analisar os problemas e nunca nos fazem sentir que estamos a ser um incómodo. A equipa de apoio está sempre do nosso lado. São também excelentes a priorizar problemas e questões e a solicitar a ajuda da equipa de desenvolvimento, se necessário, e são fantásticos a pensar fora da caixa."

"Neste ano letivo, pretendemos continuar a integrar o WISEflow. Estamos a trabalhar em colaboração com o nosso grupo de trabalho do corpo docente para melhorar a experiência dos autores e dos avaliadores. Continuaremos a partilhar sugestões de desenvolvimento com a UNIwise e esperamos começar a trabalhar com um grupo de utilizadores do WISEflow em Londres para partilhar a nossa experiência e as melhores práticas, bem como identificar necessidades de desenvolvimento comuns."

a UNIwise foi realmente solidária e comunicativa e respondeu às nossas necessidades

"A equipa de apoio da UNIwise foi fantástica e ajudou-nos em tudo o que parecia um pouco incerto."

"Adoramos a equipa de apoio da UNIwise! Estão sempre a apoiar-nos. São também excelentes a priorizar problemas e questões e são fantásticos a pensar fora da caixa."

QUER ENTRAR EM CONTACTO COM UM ESPECIALISTA?