Naviguer dans la pandémie : l'évaluation numérique à Brunel
Contexte
L'université Brunel de Londres est une université multidisciplinaire à forte orientation recherche. Avec plus de 17 000 étudiants et 2 500 membres du personnel venus du monde entier, elle figure parmi les établissements les plus diversifiés du Royaume-Uni. Ces deux dernières années ont été « intéressantes » ; comme d’autres, Brunel a dû agir rapidement pour atténuer l’impact de la pandémie de Covid-19 et des confinements nationaux sur l’apprentissage, l’enseignement et l’évaluation, et veiller à ce que les étudiants puissent poursuivre ou terminer leurs études comme prévu.
La mise en place d’une plateforme d’évaluation numérique a facilité cette transition ; Brunel utilise WISEflow depuis l’année universitaire 2015/2016 dans divers départements. Cependant, le passage de la quasi-totalité des examens en ligne au printemps 2020 a tout de même représenté une tâche colossale.
Alors qu’une nouvelle « normalité » s’installe, la professeure Mariann Rand-Weaver, vice-rectrice chargée de l’éducation, et Robyn Fitzharris, directrice de cabinet de la vice-rectrice, reviennent sur la flexibilité de l’évaluation numérique et sur la manière dont les données d’examen ont été utilisées pour veiller à l’égalité et orienter la réponse aux questions relatives au bien-être des étudiants.
RÉPONSE INITIALE
« Lorsque le premier confinement a été annoncé au Royaume-Uni en mars 2020, nous étions à un mois du premier examen, prévu le 20 avril. Bien que nous utilisions WISEflow depuis plusieurs années, seuls 20 % des étudiants avaient déjà passé un examen numérique. Cependant, l’ensemble du personnel et des étudiants connaissaient bien WISEflow pour y avoir soumis leurs devoirs, et nous avons pris la décision que les examens à distance se dérouleraient en format « à livre ouvert ». Ce n’était pas le moment d’initier nos étudiants à un navigateur verrouillé ! Nous avons plutôt modifié les types de questions et organisé des examens d’une durée similaire à celle prévue afin de compenser le fait que les étudiants avaient accès à leurs notes, à leurs livres et à divers navigateurs web. »
« Des inquiétudes ont été exprimées avant et pendant le processus, tant par le personnel que par les étudiants. Ces craintes concernaient principalement la disponibilité du matériel – ordinateurs portables, Wi-Fi et espaces calmes – et il est donc apparu clairement que nous devions faire plus que simplement transférer les examens en ligne. »
« Nous avons mis en place un programme de prêt d’ordinateurs portables afin d’essayer d’atténuer les désavantages subis par les étudiants à travers l’université ; cependant, nous avons estimé qu’il fallait aller plus loin pour protéger les étudiants. Nous avons donc pris la décision d’autoriser les étudiants à reporter leurs examens sans qu’une autorisation soit nécessaire. Cela a offert une certaine flexibilité aux étudiants et allégé le poids des examens imminents dans un contexte extérieur en constante évolution et particulièrement difficile. »
SUIVI QUOTIDIEN DES EXAMENS
« Comme la plupart de nos examens ont conservé leur durée initiale, nous avons mûrement réfléchi à la manière d’éviter que des étudiants ne dépassent l’heure limite de soumission et ne nous inondent d’appels paniqués. Nous en avons tout de même reçu quelques-uns, mais en définissant un délai « caché » dans WISEflow, nous avons évité que les étudiants ne soient déconnectés en cas de problème au moment de la soumission. »
« Bien que nous étions préoccupés par l’impact des problèmes techniques et que nous estimions qu’une heure limite stricte aurait été injustement préjudiciable aux étudiants, nous ne voulions pas non plus que ceux-ci bénéficient d’un avantage indu. En surveillant chaque examen, nous avons constaté que seuls environ 10 % des soumissions étaient en retard, la plupart ayant été envoyées quelques minutes après l’heure limite et ne constituant donc pas un sujet de préoccupation. Les étudiants ayant soumis leur travail plus tard ont fait l’objet d’un suivi à l’aide du journal des examens de WISEflow afin de vérifier si leurs allégations de problèmes techniques étaient fondées. L’approche pragmatique adoptée par Brunel s’est avérée très efficace, et la possibilité d’utiliser l’empreinte numérique a été essentielle pour garantir que personne ne tire parti du système. »
ÉVALUER L'ENGAGEMENT DES ÉTUDIANTS À L'AIDE DE WISEflow PI
« Un suivi quotidien a également été mis en place pour déterminer combien d’étudiants passaient leurs examens. Bien que nous ayons, à juste titre, donné aux étudiants la possibilité de reporter leurs examens à plus tard dans l’année, nous craignions néanmoins que, si un grand nombre d’entre eux optaient pour cette solution, cela n’entraîne d’importantes répercussions opérationnelles. Les données de l’API WISEflow nous ont permis de suivre quotidiennement la participation aux examens, en mettant en évidence des tendances particulières selon les différents groupes d’étudiants. En combinant ces données avec des informations plus générales sur les étudiants, nous avons comparé ceux qui passaient les examens à ceux qui ne le faisaient pas et nous nous sommes demandé s’ils étaient dans l’incapacité d’accéder aux évaluations (précarité numérique ?) et s’il fallait que nous prenions l’initiative de les contacter pour leur apporter notre soutien. »
« Bien que nous disposions de moyens pour mesurer les niveaux de précarité, tels que le revenu des ménages, nous avons encore du mal à trouver des données fiables sur une base évolutive. Mais nous savons que bon nombre de nos étudiants sont issus de quartiers défavorisés de Londres – 25 % à 30 % proviennent de certaines des zones les plus défavorisées du Royaume-Uni. »
UN SOUTIEN BASÉ SUR LES DONNÉES
« Nous avons été ravis de constater qu’une grande partie des étudiants (~87 %) ont pu accéder aux examens et les passer avec succès depuis leur domicile en mai 2020. Cependant, les données relatives à la participation, ventilées par caractéristiques des étudiants, ont mis en évidence que les étudiants en situation de handicap, les étudiants adultes et ceux issus de zones défavorisées étaient moins susceptibles de passer leurs examens au semestre de printemps. Nous avons pris contact de manière proactive avec ces étudiants, ce qui nous a aidés à mettre en place un soutien supplémentaire pour la session d’examens d’août (et les suivantes), notamment des espaces calmes réservables, une augmentation des fonds d’aide aux étudiants en difficulté et davantage d’ordinateurs portables disponibles en prêt. »
« Une analyse des diplômes obtenus n’a révélé que de légères fluctuations dans les résultats de ces groupes, ce qui, selon nous, valide notre approche visant à soutenir les étudiants pendant cette période très difficile. Nous continuerons à surveiller les données relatives à la participation à l’avenir afin de nous assurer que nos méthodes d’évaluation ne désavantagent pas intrinsèquement certains groupes d’étudiants. »
PRÉCIPITER LE CHANGEMENT
« Le fait d’avoir été contraints de travailler en ligne et à distance nous a ouvert l’esprit aux nouvelles possibilités et nous a fait prendre conscience que faire les choses différemment peut s’avérer plus efficace »
« Certains membres du personnel ont profité de l’obligation de recourir à des examens à distance et à livre ouvert pour repenser l’évaluation. Par exemple, la dissertation traditionnelle de trois heures utilisée en sciences politiques et en histoire a été remplacée par un examen prolongé (ou un devoir raccourci) de 24 à 48 heures, ce qui permet de poser des questions plus approfondies. Parmi les autres innovations, on peut citer le fait que les étudiants disposent de six à sept heures pour effectuer des recherches et intégrer des informations provenant de diverses sources afin de répondre aux questions. »
« Ce que ces deux exemples ont en commun, c’est qu’ils constituent des évaluations authentiques ; à l’avenir, les étudiants pourraient se voir accorder une journée pour rédiger des rapports ou fournir une analyse. Ces nouveaux formats sont donc plus proches des expériences de la vie réelle que le fait d’être enfermé dans une salle pendant trois heures avec un stylo et du papier ! Le fait d’être contraints de travailler en ligne et à distance nous a ouvert l’esprit sur ce qui est possible et nous a fait prendre conscience que faire les choses différemment peut être mieux. Et les élèves sont eux aussi positifs : ils abordent les évaluations numériques avec sérénité et ont déclaré apprécier de travailler sur leurs ordinateurs portables – au fond, où est le problème ? »
REGARD VERS L'AVENIR
« Nous nous estimons chanceux d’avoir disposé d’une plateforme d’évaluation numérique lorsque la pandémie a frappé : WISEflow nous a permis de continuer à évaluer les étudiants dans des délais limités lorsque cela était approprié ; d’organiser des examens en ligne pour les étudiants qui y étaient habitués ; et de suivre ce qui se passait presque en temps réel. Grâce à cette expérience, notre établissement a évolué : les examens de 2020/2021 se sont déroulés presque sans incident. Et bien qu’il y ait eu un retour à certains examens sur papier lors de la dernière session (mai 2022), la majorité des disciplines utilisent WISEflow, à distance ou sur le campus. »
« Nos expériences au cours des deux dernières années ont mis en évidence les nombreux avantages des Examens numériques. Nous avons « sauté le pas » lorsque nous avons utilisé WISEflow pour la première fois, et c’est ce que nous avons dû faire à nouveau en mai 2020 – pour moi, cela a été avantageux, car l’adoption des Examens WISEflow aurait autrement été lente. Le mérite en revient à notre personnel qui a relevé le défi ! Le principal inconvénient a été la fraude étudiante qui en a résulté (plagiat et collusion), et bien que nous ayons utilisé le logiciel de comparaison faciale de WISEflow, cela ne constitue pas, à notre avis, une solution. Nous ne pensons pas non plus que la surveillance soit une voie que nous souhaitons emprunter, et à l’avenir, nous aurons probablement recours à des examens surveillés sur le campus, où l’accès aux ressources devra être contrôlé. »
« Qui aurait pu imaginer, lorsque nous avons entamé notre collaboration avec UNIwise en 2015 et planifié notre orientation future, que cela s’avérerait déterminant pour faire face à une pandémie cinq ans plus tard ? »
COMMENTAIRE FINAL
« Qui aurait pu imaginer, lorsque nous avons entamé notre collaboration avec UNIwise en 2015 et planifié notre orientation future, que cela s’avérerait déterminant pour faire face à une pandémie cinq ans plus tard ? De nombreux établissements d’enseignement supérieur ont dû recourir à leurs environnements d’apprentissage virtuels (VLE) pour faire passer les examens, car c’était leur seule option, alors que nous disposions d’une plateforme d’évaluation dédiée qui nous a également permis de surveiller et d’atténuer l’impact sur les étudiants. »
« Les examens sont généralement des activités courtes et à enjeux élevés. Les informations que nous avons recueillies au cours du processus d’évaluation numérique ont permis d’identifier des problèmes liés à ces examens spécifiques ; cependant, les données montrent qu’il est nécessaire d’élargir notre réflexion – nous avons constaté que les présentations, par exemple, suscitent le même type de préoccupations chez les étudiants : des problèmes de connexion Wi-Fi et un manque d’espaces calmes, par exemple. »
« Les données ont aidé Brunel à réfléchir au type de soutien dont les étudiants ont besoin pour l’ensemble de l’enseignement et de l’apprentissage, et pas seulement pour des évaluations spécifiques. Cette expérience a vraiment mis en lumière ce point : nous devons toujours nous demander comment l’évaluation peut être améliorée et rendue équitable pour tous nos étudiants. »
QUESTIONS FRÉQUEMMENT POSÉES
Un projet pilote permet d'identifier les besoins, de tester les processus et de vérifier que la solution choisie répond aux exigences de l'établissement.
Grâce à des sessions de formation, des examens blancs, une communication claire et des structures de soutien, nous avons veillé à ce que toutes les parties prenantes se sentent à l'aise avec le nouveau système.
La plateforme permet la gestion numérique des évaluations écrites, audio et orales, offrant des fonctionnalités d'enregistrement, de commentaires structurés et de workflows de soumission sécurisés.
VOUS SOUHAITEZ CONTACTER UN EXPERT ?
Contactez-nous et réservez une démonstration pour en savoir plus sur la manière dont UNIwise peut vous accompagner dans votre transition vers l'évaluation numérique.