Os exames com consulta e baseados em ferramentas estão a crescer — mas o confinamento nem sempre é a solução adequada. Um modelo de supervisão proporcional e baseado em evidências pode proteger a integridade, ao mesmo tempo que apoia fluxos de trabalho de avaliação autênticos.
O PROBLEMA QUE ESTAMOS SEMPRE A TENTAR RESOLVER COM UMA FERRAMENTA
As universidades pretendem duas coisas ao mesmo tempo: uma avaliação que reflita a prática real e resultados em que se possa confiar. Cada vez mais, essas duas coisas entram em conflito nos exames digitais. Quanto mais autêntica se torna a tarefa, mais provável é que exija ferramentas especializadas: folhas de cálculo, ambientes de programação, software de modelação ou aplicações específicas da disciplina. Nesses contextos, uma abordagem de bloqueio rigoroso pode tornar-se um instrumento ineficaz — ou bloqueia totalmente o fluxo de trabalho, ou obriga a uma reformulação da avaliação que compromete precisamente a competência que se pretendia certificar.
É por isso que muitas instituições estão a avançar para «níveis de exame» — não porque estejam a flexibilizar os padrões, mas porque a integridade é melhor protegida quando o modelo de segurança corresponde ao modelo de avaliação. Um exame de livro fechado e altamente padronizado é uma coisa. Um exame de livro aberto baseado em ferramentas é outra. Tentar tratá-los da mesma forma cria atritos, exceções e disputas.
DOIS MODELOS DE INTEGRIDADE - PREVENÇÃO VS PROVA
Nenhum dos modelos é «melhor» em termos abstratos. A questão é qual dos modelos melhor apoia o objetivo da avaliação sem criar riscos desnecessários, custos ou distorções pedagógicas indesejadas.
PORQUE É QUE A INVIGILAÇÃO BASEADA EM PROVAS ESTÁ A TORNAR-SE MAIS RELEVANTE
A supervisão baseada em evidências torna-se relevante quando qualquer uma das seguintes condições se verificar:
-
O exame é, por definição, de consulta livre, e o objetivo não é bloquear recursos, mas garantir que os alunos sigam as regras acordadas (por exemplo, nenhuma colaboração não autorizada).
-
O exame é baseado em ferramentas, exigindo aplicações que são difíceis ou impossíveis de suportar num ambiente bloqueado.
-
A instituição necessita de auditabilidade, o que significa que deve ser capaz de investigar incidentes suspeitos com provas documentadas, em vez de suposições ou boatos.
Um ponto-chave de governança é importante aqui: a monitorização não é prova de má conduta. É uma base para investigação. Uma boa prática consiste em tratar registos e gravações como indicadores que justificam uma revisão — e não como condenação automática. Isto protege tanto os alunos como as instituições, garantindo que as decisões se baseiem no julgamento humano e no devido processo.
O QUE "BOM" PARECE - INVIGILAÇÃO PROPORCIONAL
Se uma instituição optar por um modelo baseado em evidências, o sucesso depende menos da tecnologia e mais da governança. As configurações mais sustentáveis tendem a partilhar quatro características
Os alunos precisam de uma explicação simples sobre o que é permitido (por exemplo, quais as ferramentas autorizadas) e o que constitui má conduta (por exemplo, a comunicação com outras pessoas). O modelo de integridade deve ser compreensível, não apenas aplicável.
Se um exame recolher provas de ecrã, dados da aplicação ou outros sinais comportamentais, os alunos devem ser informados de forma clara — o que é recolhido, quando e porquê. Um indicador visível durante a sessão também reduz a ambiguidade. No WISEflow Device Monitor, o monitoramento está, por definição, limitado ao período de participação, e existem comportamentos e esclarecimentos explícitos comunicados às instituições.
As evidências só são úteis se a revisão for consistente. As instituições beneficiam da definição de um pequeno conjunto de rotinas de revisão: o que desencadeia o acompanhamento, quem revisa e que documentação é necessária para as decisões. A monitorização dos resultados deve suscitar mais investigações, não substituí-las.
A monitorização gera grandes volumes de dados. Uma abordagem proporcional implica recolher apenas o que é necessário para o contexto do exame e retê-lo por um período definido e limitado, em conformidade com a política institucional. Os materiais de DPIA da UNIwise para o WISEflow Device Monitor descrevem a eliminação automática após seis meses e delineiam as considerações relativas ao âmbito e ao volume.
UM EXEMPLO PRÁTICO - MONITOR DE DISPOSITIVO WISEflow
O WISEflow Device Monitor foi concebido precisamente para os cenários em que o bloqueio total não é a ferramenta adequada. Suporta exames supervisionados com consulta de livros, permitindo ao aluno total liberdade no seu dispositivo, ao mesmo tempo que recolhe provas através de registos de ações, listagem do processador e captura de ecrã, para que ações indesejadas possam ser sinalizadas e investigadas pelos supervisores durante ou após o exame
Por outras palavras, inverte a lógica de bloqueio. Em vez de restringir o fluxo de trabalho, permite a utilização autêntica da ferramenta, ao mesmo tempo que proporciona à instituição uma base para a revisão da integridade.
Do ponto de vista da funcionalidade, a UNIwise descreve o Device Monitor como incluindo:
-
Captura de ecrã para fins de monitorização.
-
Monitorização opcional de aplicações em execução (visibilidade de aplicações/processos).
-
A capacidade de definir aplicações proibidas.
E do ponto de vista da governança e conformidade, a UNIwise mantém uma estrutura de DPIA específica para o processamento do Device Monitor, incluindo controlos definidos de retenção e segurança.
UMA NOTA SOBRE OS LIMITES - A JANELA DE EXAME É IMPORTANTE
Uma das salvaguardas mais importantes em qualquer configuração de monitorização é que esta se mantenha estritamente limitada ao período de avaliação permitido. A UNIwise comunicou às instituições que o WISEflow foi concebido para não aceitar nem armazenar capturas de ecrã para além do limite do período de participação, e que foram emitidas correções e esclarecimentos quando foram identificados comportamentos indesejados.
Isto é importante para a confiança. Os alunos nunca devem ficar na dúvida se a monitorização continua «em segundo plano» após o término do contexto do exame. O limite deve ser explícito, aplicado e explicável
ESCOLHER O MODELO CORRECTO - UMA LENTE DE DECISÃO SIMPLES
Ao decidir entre o regime de confinamento e a supervisão baseada em evidências, as instituições podem colocar três questões pragmáticas:
-
A avaliação requer o uso de ferramentas autênticas?
Se sim, um modelo de bloqueio estrito pode entrar em conflito com a demonstração de competência pretendida. -
O objetivo de integridade diz respeito à restrição de acesso — ou à documentação do cumprimento das regras?
Se o objetivo for impedir o acesso a recursos, o bloqueio total pode ser adequado. Se o objetivo for garantir o cumprimento das regras num ambiente de consulta livre, a monitorização e a revisão podem ser a melhor opção. -
A instituição consegue garantir uma revisão consistente e o devido processo? Os
modelos baseados em evidências exigem disciplina na revisão humana. Se essa capacidade não estiver disponível, as instituições poderão ter de definir níveis de exame mais simples ou âmbitos de monitorização mais restritos.
REFLEXÃO FINAL - INTEGRIDADE SEM DISTORCER A AVALIAÇÃO
É improvável que o futuro da integridade dos exames resida numa única escolha tecnológica. Trata-se de uma escolha de conceção: adequar a supervisão ao objetivo da avaliação e adequar a recolha de provas a uma governação proporcional.
O bloqueio continuará a ser valioso nos casos em que as restrições de exame fechado sejam adequadas. Mas, para exames abertos e baseados em ferramentas, a supervisão baseada em evidências oferece um caminho que é frequentemente mais realista, mais escalável e mais alinhado com a avaliação autêntica — ao mesmo tempo que continua a proporcionar a auditabilidade de que as instituições necessitam quando surgem questões.
VAMOS FALAR
Se estiver a rever a sua abordagem à integridade dos exames para avaliações com consulta de livros e baseadas em ferramentas, teremos todo o prazer em partilhar a nossa experiência e orientações práticas para configurações de supervisão baseadas em evidências — incluindo a forma como o WISEflow Device Monitor apoia a monitorização no âmbito do fluxo de trabalho da avaliação.
MANTENHA-SE ACTUALIZADO SOBRE OS ÚLTIMOS DESENVOLVIMENTOS
PERGUNTAS FREQUENTES
Uma vez que muitas avaliações autênticas requerem ferramentas especializadas, tais como ambientes de programação, folhas de cálculo ou software de modelação. Um navegador em modo de isolamento rigoroso pode bloquear estes fluxos de trabalho ou forçar reformulações que comprometam as competências que a avaliação se destina a medir.
Existem duas abordagens:
- Prevenção (bloqueio): restringir o acesso a dispositivos e recursos.
- Supervisão baseada em evidências: permitir a utilização de ferramentas enquanto se recolhem evidências de monitorização que possam ser analisadas por pessoas caso surjam preocupações. A escolha certa depende do objetivo da avaliação.
A supervisão baseada em evidências centra-se na monitorização, registo e revisão, em vez de bloquear comportamentos. É adequada para exames com consulta de livros e ferramentas, em que o objetivo é garantir o cumprimento das regras e a auditabilidade, em vez de impedir todo o acesso a recursos.
Os dados de monitorização são tratados como um indicador, não como prova de má conduta. As instituições investigam comportamentos sinalizados através de rotinas de revisão definidas e do julgamento humano, garantindo que as decisões sejam baseadas em provas e defensáveis tanto para os estudantes como para a instituição.
As configurações eficazes incluem regras de avaliação claras, transparência sobre o que é monitorizado, processos de revisão humana consistentes e uma minimização e retenção de dados disciplinadas. A governança é tão importante quanto a própria tecnologia.
O WISEflow Device Monitor permite a utilização total da ferramenta enquanto recolhe provas proporcionais, tais como capturas de ecrã e registos de aplicações, dentro da janela de análise. Suporta a auditabilidade e a investigação sem impor bloqueios restritivos, a par de controlos definidos de DPIA, retenção e segurança.