Integrações, inovações e transições: a Universidade de Erfurt sobre as vantagens da avaliação digital
Antecedentes e contexto
Desde a sua refundação em 1994, a Universidade de Erfurt consolidou-se firmemente no panorama do ensino superior, tanto a nível nacional como internacional, graças a um perfil excecional nas áreas das ciências culturais e sociais. Com foco na religião, nas ciências humanas, nos estudos culturais, na sociedade e na formação de professores, a Universidade de Erfurt é uma instituição de ensino e investigação com localização central que conta com aproximadamente 6.000 estudantes, cerca de 100 cátedras, bem como cerca de 400 funcionários académicos e 300 funcionários administrativos.
A Universidade de Erfurt utiliza o WISEflow desde 2020.
O texto que se segue é um relatório do Professor Dr. Gerd Mannhaupt, Vice-Presidente para Assuntos Estudantis e Diretor da Escola de Educação de Erfurt na Universidade de Erfurt.
UM CATALISADOR PARA A MUDANÇA
Em primeiro lugar, gostaria de começar por referir que a razão para a introdução dos exames digitais em Erfurt não se deveu apenas à pandemia da COVID-19. Na nossa universidade, já vínhamos a discutir a digitalização dos exames há dois anos antes do surgimento do coronavírus. Os colegas que realizavam exames com muitos estudantes, mas não dispunham de apoio tecnológico, eram particularmente favoráveis a esta medida. Alguns deles utilizam principalmente testes de escolha múltipla e, para estes tipos de exame, um exame digital é muito mais fácil de implementar do que um exame em papel e caneta. Por isso, já estávamos à procura de uma solução.
Pessoalmente, há muito tempo que queria livrar-me dos trabalhos escritos em papel. No passado, todos os alunos tinham de me enviar um e-mail com um ou mais ficheiros PDF: tudo tinha de me ser enviado eletronicamente. Do meu ponto de vista, não se tratava apenas de realizar os exames digitalmente, mas de digitalizar todo o processo de avaliação. Esse foi o motivo decisivo para a mudança e é um dos principais pontos fortes do WISEflow! A minha pesquisa revelou que, além do WISEflow, não havia muitas alternativas adequadas para nós. Escolhemos o WISEflow porque é muito mais do que um simples software de exames digitais para exames à distância. Gostámos do reconhecimento automático de texto e dos serviços antiplágio incluídos na nossa licença.
PROCESSO DE DECISÃO E POLÍTICA DE PRIVACIDADE
Não creio que venha a ser desenvolvido outro sistema de código aberto que se aproxime sequer do desempenho do WISEflow. Quando começámos a considerar a introdução de exames digitais, perguntei ao diretor do nosso centro de dados, responsável por todas as questões de TI: «Quanto tempo demoraria a desenvolver o nosso próprio sistema de exames?» Ele respondeu que demoraria, pelo menos, dois anos. Na minha opinião, dois anos não seriam tempo suficiente. Trata-se de sistemas criados à medida, pelo que, se um docente disser: «Quero que seja assim», isso tem de ser programado. E depois surge a pessoa seguinte e diz: «Mas eu preciso de outra coisa.» Todas as universidades que decidiram construir os seus próprios sistemas parecem chegar à conclusão de que dois anos não são suficientes. Nenhuma universidade consegue, sozinha, desenvolver as mesmas funcionalidades que o WISEflow oferece.
Também não é apenas uma questão de tempo — desenvolver o seu próprio sistema requer muitos recursos. Em termos de custos, o WISEflow era e continua a ser um sistema comparativamente económico. Teria sido insensato da nossa parte tomarmos uma decisão diferente.
Desde muito cedo no processo, envolvemos o Comissário Estadual para a Proteção de Dados («Landesbeauftragter für den Datenschutz») já em julho de 2020, antes do primeiro período de exames. Entretanto, a Lei do Ensino Superior da Turíngia foi alterada para permitir a realização de exames digitais. Agora contém exatamente o que precisamos para podermos executar o nosso projeto de forma significativa. Adaptámos igualmente os nossos regulamentos de exames. Estes especificam, por exemplo, de que forma os exames digitais devem ser realizados. Tudo isto faz agora parte da política geral e permanente de exames da Universidade de Erfurt.
O WISEflow utiliza servidores AWS alojados na nuvem; todo o processamento ocorre exclusivamente de forma encriptada. O Comissário Estadual para a Proteção de Dados auditou e aprovou o processo.
Na minha perspetiva, ficamos a saber semanalmente de alguma instituição pública que foi comprometida de alguma forma. Ninguém afirma agora que a localização dos servidores deva ser na Turíngia devido a estas violações — nunca se deve acreditar que está seguro apenas porque as cópias de segurança estão armazenadas localmente, certo? Certamente é possível construir um bom sistema de cópias de segurança onde talvez os dados do último dia sejam carregados antes de um ciberataque, mas os servidores locais são tão seguros (ou inseguros) quanto os servidores que a AWS opera na Irlanda. Então, qual é a diferença? Eu diria que os servidores da AWS são mais seguros porque existe lá uma maior especialização em tecnologias de segurança.
ADOPÇÃO DA PLATAFORMA NA UNIVERSIDADE
A implementação foi relativamente rápida. Assinámos o contrato em junho de 2020 e o primeiro dia de exames foi a 13 de julho. O que significa que o implementámos no espaço de oito semanas. Nessa altura, a equipa da UNIwise afirmou que seria por pouco. Uma das razões pelas quais conseguimos implementá-lo praticamente sem dar nas vistas foi o facto de termos tirado partido da situação da COVID-19 desde muito cedo. Todos os colegas de outras universidades com quem falámos, que só começaram a pensar em exames digitais posteriormente — quando a pressão dos confinamentos devido à COVID-19 já tinha diminuído — tiveram de lidar com uma enorme resistência por parte do corpo docente.
Houve também universidades aqui na Turíngia que, mesmo durante os confinamentos, tentaram de alguma forma gerir tudo através da presença física, porque não tinham conseguido convencer o seu corpo docente. Não se certificaram de envolver os docentes nesta jornada.
Aqui na nossa universidade, por outro lado, colegas e estudantes perguntaram-me: «Quando é que vamos ter um sistema de exames eletrónico?» A ideia foi recebida com ampla aprovação. Os cursos mais pequenos iriam aderir de qualquer forma, mas o que era realmente importante era conquistar adeptos nos cursos maiores, que realizam exames escritos com 300 ou 500 estudantes.
Tudo decorreu sem problemas e funcionou na perfeição. Não se registou um único incidente nos exames durante a pandemia. Todos os nossos exames foram realizados nas datas previamente estabelecidas no catálogo de cursos de março de 2020. Nenhum exame foi cancelado. Portanto, este é o resultado – foi bom! 6.000 estudantes utilizaram o sistema e ficaram absolutamente satisfeitos por saberem que iriam receber os seus certificados em setembro de 2020 e não teriam de esperar um ou dois anos – ou mesmo um semestre – devido à impossibilidade de realizar os exames. E os estudantes reconheceram-nos muito o mérito pelo facto de não ter havido atrasos. Recebemos muitos comentários positivos da parte deles.
TRAZER OS FUNCIONÁRIOS A BORDO
Pessoalmente, sinto-me muito confiante na utilização do WISEflow. No início, participei em todas as sessões de formação disponíveis. E, neste momento, é claro, todos os nossos colaboradores também estão a par das novidades. É importante envolver todas as partes interessadas do projeto durante a fase de implementação para garantir que todos estejam realmente a bordo. Mesmo que isso não corresponda à crença comum, os docentes universitários têm, essencialmente, uma postura conservadora. Por mais inovadoras que as suas investigações possam ser, são conservadores no que diz respeito a questões estruturais. Tudo deve permanecer como está, ou melhor ainda, voltar a ser como era há anos. Como referi, de acordo com os nossos regulamentos de exames, os exames digitais são a norma. Mas o examinador de uma tese de mestrado também pode assinalar no formulário de inscrição digital que pretende uma versão em papel.
Nesse caso, os estudantes devem apresentar uma segunda versão da sua tese para que a correção possa ser feita em papel. Portanto, sim, isso ainda existe, mas é muito limitado. Na Escola de Educação de Erfurt (ESE), isto não constitui um grande problema. Há sempre uma discussão: qual é a melhor forma de corrigir os trabalhos dos estudantes? Em todos os locais de trabalho modernos deveria haver pelo menos um computador concebido para a utilização de uma caneta digital, com software superior ao Acrobat, no qual alguém possa fazer correções manuscritas nos ficheiros PDF. É assim que eu o faço. Tenho um software especial para isso, e funciona na perfeição para tais tarefas. Consigo ler e escrever com ele tal como faço no papel.
Se eu não tivesse essa opção como docente e tivesse de fazer todo o meu trabalho de anotação com um teclado e um rato, também não gostaria de corrigir ou editar exames digitais. Mas o nosso centro de dados introduziu agora dispositivos compatíveis com caneta digital para a correção, pelo que cada vez mais docentes estão a utilizar esta opção. É por isso que já não há reservas.
CONFORMIDADE COM OS REGULAMENTOS DA UNIVERSIDADE
De acordo com os nossos regulamentos, temos de arquivar exames e documentos durante cinco anos. Graças ao WISEflow, estamos agora a livrar-nos gradualmente de toneladas de papel das nossas prateleiras e armários metálicos. Todos os documentos estão a ser transferidos para o arquivo eletrónico do WISEflow. Estamos literalmente a ver toneladas de papel desaparecerem dos armários e prateleiras. Agora, tudo está devidamente arquivado e disponível a qualquer momento e, de acordo com o nosso contrato de licença com a UNIwise, tudo é eliminado após cinco anos, tal como deve ser. Por outras palavras: o sistema de arquivo físico pertence ao passado.
Esta funcionalidade, da qual tomámos conhecimento pela primeira vez durante a apresentação do WISEflow, foi o fator decisivo na nossa escolha da plataforma. Não pretendia apenas um sistema provisório para exames online durante a pandemia da COVID-19 – a ideia era, e continua a ser, introduzir aqui um sistema de uma vez por todas e mantê-lo.
Está também previsto no regulamento de exames que, por exemplo, no caso de teses de mestrado ou de final de curso, a data de entrega da versão em papel já não constitui a data de entrega juridicamente vinculativa (já nem sequer pretendemos uma versão em papel), mas sim a data da entrega eletrónica. O prazo para a entrega é o fim do fluxo no WISEflow.
Em janeiro de 2021, vários estudantes contactaram a Escola de Educação de Erfurt (abreviadamente, «ESE»), que é o nosso Centro de Formação de Professores e Investigação Educacional, do qual sou diretor. Ligaram-nos e perguntaram se a ESE sabia quais as lojas de fotocópias que estavam abertas durante o confinamento. Então, surgiram problemas. «Como é que os trabalhos finais vão ser impressos para entrega durante o confinamento se todas as lojas de fotocópias estão fechadas?» A ESE perguntou-me como iríamos resolver isso, e eu respondi que poderíamos fazê-lo através do WISEflow sem qualquer problema. É importante ter em conta que a grande maioria das teses de mestrado é redigida na ESE: entre 300 a 350 teses de mestrado. Isso significa que, durante este período de exames, havia 350 estudantes que não podiam entregar as versões impressas porque não era possível obter quatro cópias das suas teses. Assim, organizámos rapidamente esse processo de forma digital na ESE.
Não é possível enviar trabalhos por e-mail. Isso não é legalmente viável. Se necessitar de documentos de exame digitais dos alunos, estes têm de ser enviados através do WISEflow. Todos estão absolutamente convencidos das funcionalidades do WISEflow. Todas as faculdades utilizam o WISEflow e todas as teses de mestrado são processadas através dele.
VANTAGENS DOS EXAMES DIGITAIS PARA A UNIVERSIDADE DE ERFURT
1. Uma das vantagens do WISEflow enquanto sistema é que as alterações são relativamente fáceis de implementar. É possível alargar facilmente o sistema para incluir um período de exames específico. E outra grande vantagem: o arquivo já não é necessário. Tínhamos metros de folhas de exame nos nossos arquivos. Se se tem muitos exames escritos, tem-se muito papel. Tudo isso já não é necessário.
2. Os docentes podem facilmente disponibilizar aos estudantes os trabalhos entregues, acompanhados dos seus próprios comentários. É importante salientar que, de acordo com um acórdão do Tribunal de Justiça Europeu, todos os estudantes têm direito a uma cópia do seu trabalho com os comentários do examinador. Para cumprir esta exigência, basta escolher se pretende partilhar comentários integrados com os estudantes. Um simples clique permite-lhe partilhar esses comentários facilmente. Em suma, a eficiência do sistema foi simplesmente impressionante.
3. O enorme tempo que poupo como docente pode agora ser utilizado noutras tarefas. As notas tinham de ser introduzidas previamente e verificadas novamente, sendo depois normalmente transferidas para o Excel. Essas tarefas desapareceram completamente. A julgar pela minha própria experiência, diria que se poupa cerca de metade do tempo de leitura em comparação com os exames manuscritos. Crio sempre exames de desenvolvimento, e os trabalhos digitais são simplesmente muito mais rápidos de ler do que os manuscritos. Atualmente, estamos a trabalhar para consciencializar os estudantes de que os textos também podem incluir uma estrutura e que podem trabalhar com títulos. Esse é o próximo desafio. Caso contrário, escrevem literalmente 1 000 palavras num único bloco. Nem sequer há um parágrafo. Isso é simplesmente vantajoso para todo o corpo docente, do ponto de vista da leitura.
4. Outra vantagem: poupança de custos. Poupamos em custos de infraestrutura, por exemplo, em mobiliário e equipamento. Um único período de exames custa-nos tanto quanto o software WISEflow durante um ano inteiro, com todas as personalizações associadas. Também poupamos dinheiro porque os assistentes dos estudantes já não têm de lidar com todo o papel, para não falar dos custos de impressão. Antes, tínhamos de imprimir documentos, exames e instruções para centenas e milhares de estudantes. Tudo isso pertence ao passado. Para nós, o preço do sistema é um dos argumentos mais fortes.
ADAPTAÇÃO DE PROCESSOS PARA INCORPORAR EXAMES DIGITAIS
Semestres com 300 estudantes utilizam o WISEflow, mas o mesmo acontece com cursos mais pequenos, como a nossa Faculdade de Teologia Católica, que por vezes envolve apenas cinco ou seis estudantes por curso. Criámos também um curso de formação especial para esta faculdade. Esta utiliza o WISEflow para pequenos exames e para muitos dos trabalhos escritos.
A cultura de exames difere consoante a faculdade e a pessoa que os administra. Na Faculdade de Ciências da Educação, são os próprios docentes que preparam os exames, o que significa que eu próprio preparo os exames para os meus 230 estudantes, juntamente com outros colegas. Na nossa Faculdade de Ciências Políticas, o pessoal administrativo é o principal responsável pela configuração dos fluxos. Contamos com duas pessoas na equipa que prestam apoio estruturado. Existem horários de atendimento semanais, tanto para alunos como para docentes, para questões relacionadas com o WISEflow. Além disso, o apoio também está disponível por telefone ou e-mail.
Adaptámos os nossos processos para que tudo possa ser claramente compreendido pelos nossos estudantes. Agora permitimos exames digitais à distância e exames digitais realizados no campus, com o consentimento explícito dos nossos estudantes, e a utilização de servidores em nuvem seguros está claramente regulamentada. Se os estudantes disserem: «não, não quero utilizar o meu próprio computador, não quero instalar o navegador de bloqueio, não quero utilizar o reconhecimento facial», então a única opção para esses estudantes é realizar o exame digital sob supervisão presencial em computadores fornecidos pela universidade. Esse é o processo que estamos a esclarecer neste momento. Quando os alunos realizam os seus exames presencialmente no campus, não têm de se preocupar com o reconhecimento facial. Nesse caso, não precisam de fotografias de referência, o que significa que todos os alunos matriculados num programa de mestrado na nossa instituição e que não realizem exames não terão uma fotografia de referência no sistema ou nos servidores.
No que diz respeito aos exames digitais no nosso campus, não sabemos se conseguiremos concretizá-los com a nossa infraestrutura. Temos 100 computadores que podemos utilizar para este fim, pelo que teremos de determinar se tal é possível. Tenho 230 estudantes, e 222 deles afirmaram que gostariam de realizar os seus exames a partir de casa. Os exames à distância foram completamente abolidos noutras universidades, mas nós mantemos esta prática porque temos um problema de espaço. Neste momento, não conseguimos acomodar grupos de exame muito grandes. O maior, que é o de psicologia do desenvolvimento, tem quase 500 estudantes. Não conseguiríamos sequer distribuí-los pelo campus de forma a obter uma distribuição razoável de lugares, de modo a que apenas cada segundo lugar fosse ocupado – este tipo de disposição reduz a capacidade da sala de aula em 75%. Portanto, para nós, trata-se realmente de um problema de espaço. Outras instituições não têm grupos de exames desta dimensão.
Continuamos também a realizar exames à distância para acomodar os estudantes que não podem deslocar-se ao campus. Por exemplo, temos uma unidade curricular em conjunto com a Willy Brandt School, na qual participam cerca de 100 estudantes internacionais de todo o mundo – estes necessitam da opção de um exame à distância. No entanto, assim que as condições espaciais e técnicas estiverem reunidas, os exames digitais no campus são o nosso objetivo final, e não os exames à distância.
A nossa estratégia a longo prazo é continuar com isto. Os membros do corpo docente recebem sessões de formação todos os semestres, que agora ministramos nós próprios. Os novos docentes são também introduzidos ao sistema através de cursos de formação. Normalmente, realizamos também uma sessão à tarde para apresentar as novas funcionalidades das novas versões, e isso é suficiente para manter o elevado nível de aceitação existente em relação ao sistema. Estamos a gerir bem a situação; não há problemas.
Para o pessoal, criámos um «ponto único de referência» após a fase de implementação, onde todas as informações relevantes podem ser encontradas e as mensagens podem ser trocadas. Estamos a falar de uma sala no Moodle. Utilizamo-la para chamar a atenção para workshops, por exemplo, sobre novas versões do sistema. Além disso, a documentação de apoio para todo o tipo de circunstâncias também está disponível nesse local.
Os estudantes não recebem uma grande introdução. Isso acontece de forma mais natural ao longo do processo e, em parte, através de exames simulados no WISEflow. Estes têm duas funções para nós: em primeiro lugar, permitem-nos verificar se o navegador bloqueado funciona para todos os estudantes. Em segundo lugar, alguns docentes utilizam-nos para fins didáticos, para que os seus estudantes tenham uma ideia do tipo de perguntas e de trabalhos a que irão deparar-se mais tarde. Penso que esta é a razão pela qual os nossos professores realizam exames simulados com bastante frequência. Não apenas para garantir que a tecnologia funciona, mas também para proporcionar aos seus alunos conteúdos didaticamente muito valiosos. É por isso que considero que os exames simulados são importantes. Cada exame, cada prova escrita, é um pouco diferente e os alunos procuram certeza e orientação. Os exames simulados são uma boa ferramenta neste sentido.
INTEGRAÇÃO NOS SISTEMAS DA UNIVERSIDADE DE ERFURT E TRABALHO COM A UNIwise
O WISEflow está sincronizado com o sistema que utilizamos na Universidade de Erfurt. O nosso sistema chama-se ELVIS – «Erfurter.Lehr.Veranstaltungs.Informations.System». Trata-se de um sistema de gestão de exames e salas – por outras palavras, um pequeno sistema de gestão do campus. Em conjunto com a mais recente alteração ao nosso regulamento de exames, a integração funciona agora bastante bem. Os estudantes não só o utilizam para se inscreverem nas suas disciplinas, mas também para exames individuais. O módulo de exame é, assim, mais ou menos como uma disciplina em si. Isso significa que pode indicar que existe também um exame escrito para a sua aula e o fluxo pode ser criado diretamente no sistema ELVIS, pelo menos para os participantes, e eu próprio posso introduzir o resto.
Sempre que tivemos problemas ao trabalhar com o UNIwise e precisámos de apoio, fomos ajudados rapidamente. Somos programadores entusiastas — utilizadores avançados, por assim dizer — e temos constantemente ideias sobre o que mais o WISEflow deveria ser capaz de fazer. Muitas das nossas sugestões já foram implementadas. Em termos de apoio, não temos absolutamente nenhum motivo para reclamar.
INOVAÇÕES NOS EXAMES E UM OLHAR PARA O FUTURO
Os meus exames preferidos são os do Centro de Línguas: a compreensão escrita, a compreensão oral e as competências linguísticas escritas e orais têm de ser avaliadas. Tudo isto é feito no WISEflow. No WISEflow, os alunos são, na verdade, colocados num fluxo de áudio ou falam e tomam notas; os alunos gravam as suas traduções no WISEflow e o corpo docente do Centro de Línguas pode então ouvir e avaliar os resultados. Este era um formato de avaliação que eu, ingenuamente, acreditava ser possível apenas em presença. Mas não, funciona na perfeição no WISEflow.
Após o fim dos confinamentos, os colegas do Centro de Línguas pretendiam regressar aos exames presenciais, mas verificou-se que a existência de uma gravação é de enorme importância nos exames orais no que diz respeito a subtilezas como a pronúncia e a estrutura das frases. Num exame oral presencial, o que é dito não tem grande duração e os examinadores, ao contrário do que acontece com as gravações, têm de avaliar no momento. Prefiro sentar-me depois e ouvir tudo novamente no WISEflow. As gravações não são extremamente longas e podem ser acedidas mais facilmente. Achei a realização deste exame excelente.
Em geral, não conheço ninguém que tenha tido queixas sobre o WISEflow. Tornou-se parte da vida quotidiana. Estou feliz – feliz por ter escolhido o sistema certo. Foi um processo rápido e, como responsável, fico feliz por saber que tomei a decisão certa. Estou contente por ter descoberto o WISEflow para nós e direi isso a quem quer que pergunte.
PERGUNTAS FREQUENTES
Um projeto-piloto ajuda a identificar necessidades, testar fluxos de trabalho e confirmar que a solução escolhida se adequa aos requisitos institucionais.
Através de sessões de formação, exames simulados, comunicação clara e estruturas de apoio, garantindo que todas as partes interessadas se sentissem à vontade com o novo sistema.
A plataforma permite o tratamento digital de avaliações escritas, áudio e orais, possibilitando gravações, feedback estruturado e fluxos de trabalho seguros para a entrega dos trabalhos.
QUER ENTRAR EM CONTACTO COM UM ESPECIALISTA?
Entre em contacto connosco e marque uma demonstração para saber mais sobre como a UNIwise pode apoiá-lo na sua jornada de avaliação digital.