Digitales Prüfen an der Brunel University – vier Jahre später und mit Blick auf die Zukunft

Nach vier Jahren mit WISEflow reflektiert Professor Mariann Rand-Weaver, Vice-Provost an der Brunel University London, über das digitale Prüfen und seine Zukunft.

Ein Beitrag von Professor Mariann Rand-Weaver, Vice-Provost (Education), Brunel University London

Hintergrund

Mit dem Onboarding des letzten Colleges auf WISEflow erreichen wir einen Meilenstein, der es wert ist, gefeiert zu werden. Wir haben den Weg vom Machbarkeitsnachweis im Studienjahr 2015/16 bis zur hochschulweiten Einführung 2019/20 erfolgreich zurückgelegt, und WISEflow ist heute die Prüfungsplattform der Universität für summative Studienarbeiten (die von den Studierenden in ihrer eigenen Zeit bis zu einer längeren Frist bearbeitet werden) und für Prüfungen (zeitlich begrenzte, beaufsichtigte Prüfungen vor Ort). Wir haben in den vergangenen vier Jahren viel gelernt – die wichtigste Lektion: Erfahrung ist durch nichts zu ersetzen.

Wachstum

Wir haben die Gesamtzahl der Abgaben von 642 im Studienjahr 2015/16 auf 51.258 im Studienjahr 2018/19 gesteigert und die Zahl der Prüfungen im selben Zeitraum von einer Prüfung mit 156 Studierenden auf 79 Prüfungen mit über 2.700 Studierenden (Abbildung 1). Damit haben im letzten Studienjahr über 20 % der Studierenden eine digitale „Bring Your Own Device“-Prüfung (BYOD) abgelegt.

Dieser Erfolg ist dem Enthusiasmus und der Bereitschaft der Lehrenden, des Verwaltungspersonals und der Hochschulleitung zu verdanken, sich auf eine hochschulweite Zusammenarbeit einzulassen, um zu zeigen, wie Technologie die Praxis für Studierende und Mitarbeitende verbessern und Prüfungen mit hoher Tragweite erfolgreich ermöglichen kann. Wir sind daher zu Recht stolz darauf, im August 2019 mit dem Advance HE Collaborative Award for Teaching Excellence (CATE) ausgezeichnet worden zu sein; dieser nationale Preis wird an Teams vergeben, die nachweislich Wirkung auf Lehren und Lernen erzielt haben.

Abbildung 1. Infografik zum Wachstum der BYOD-Prüfungen an der Brunel University London

Reflexionen

Dieser Meilenstein ist auch eine Gelegenheit, Bilanz zu ziehen und drei zentrale Fragen zu stellen:

• Geben wir uns mit digitalen Versionen von Prüfungen mit Stift und Papier zufrieden?
• Wie lässt sich Technologie in die Prüfung selbst integrieren, statt sie nur zum Festhalten von Antworten zu nutzen?
• Wie kann die Pädagogik statt der Effizienz zur Triebkraft für den Einsatz von Technologie beim Prüfen werden?

Junge Menschen auf eine erfolgreiche berufliche Laufbahn vorzubereiten, bedeutet, sie auf eine digitale Zukunft vorzubereiten, und Technologie kann uns helfen, die Fähigkeiten, Kompetenzen und Fertigkeiten sinnvoll zu prüfen, die für den Erfolg in der Arbeitswelt des 21. Jahrhunderts erforderlich sind.

Was bremst die Verbreitung des digitalen Prüfens?

Es ist vielleicht überraschend, dass der Hochschulbereich weltweit auf diesem Weg nicht weiter vorangekommen ist, obwohl digitale Prüfungen seit über 20 Jahren eingesetzt werden. Das mag zum Teil an den Triebkräften liegen – etwa an einer ausschließlichen Ausrichtung auf Verwaltungseffizienz. Schon die technischen und sicherheitsbezogenen Aspekte können für ausreichend Umbruch sorgen, und sind sie erst einmal gelöst, ist die Bereitschaft für weitere Umbrüche gering. Lehrende scheuen häufig die vermeintlichen Risiken gewagterer Prüfungsformen; schließlich werden sie von den Studierenden evaluiert. All diese Gründe mögen eine Rolle spielen, doch die Wahrheit ist wohl, dass nur wenige von uns, die heute digitale Prüfungen einsetzen, über die Implementierung und Skalierung hinaus geplant haben, da schon diese Aufgaben für sich genommen gewaltig sind.

Arild Raaheim und Kolleg:innen (2019) haben Einblicke in die Hürden für einen innovativen Einsatz digitaler Prüfungen in Norwegen gegeben. Interessanterweise bezogen sich die häufigsten Antworten auf fehlendes Wissen darüber, wie Prüfungen das digitale Format nutzen könnten, und über Alternativen zu Aufsatzfragen. Das wirft die Frage auf, ob man realistischerweise erwarten kann, dass Lehrende, von denen die meisten keiner Generation der Digital Natives angehören, über die nötige Expertise verfügen, um Post-Paper-Prüfungen zu entwickeln. Ein aktueller Bericht von JISC über den Einsatz von Technologie in der Lehre deutete darauf hin, dass die digitale Kompetenz der Lehrenden geringer ist, als man vielleicht erwartet hätte; vermutlich wäre sie noch geringer ausgefallen, wenn man das Prüfen einbezogen hätte.

Vielleicht sollten wir uns mit digitalisierten Prüfungen mit Stift und Papier zufriedengeben; schließlich profitieren wir von einer besseren Verwaltung und einem geringeren Papierverbrauch. Es gibt keine unbequemen Anforderungen an die Lehrenden, die weiterhin dieselben Fragetypen wie bisher stellen können, und keine Infragestellung der gängigen Praxis – wir können in unserer Komfortzone bleiben und dennoch einige Vorteile der Digitalisierung nutzen.

Reicht das aus?

Doch ist eine solche Haltung haltbar? Wir leben bereits in einer vernetzten, digitalen Welt, in der Informationen leicht verfügbar sind, und es ist die Fähigkeit, mit diesen Informationen etwas anzufangen, neue Zusammenhänge zu erkennen und daraus neues Wissen zu schaffen, die geschätzt wird und für Arbeitgebende attraktiv ist. Wenn so viele Informationen jederzeit abrufbar sind, haben reine Gedächtnistests ausgedient. Times Higher Education veröffentlichte Anfang dieses Jahres einen Artikel, der authentischere Prüfungsformen forderte – in einer digitalen Prüfungsumgebung ist das ohne Weiteres möglich.

An der Brunel University haben wir den Anspruch, digitale Prüfungen so einzusetzen, dass wir auf eine Weise prüfen, die mit Prüfungen mit Stift und Papier nicht möglich ist: anspruchsvolle Aufgaben zu stellen, die die Studierenden herausfordern, zu zeigen, was sie können, und ihr Wissen auf authentische Aufgaben anzuwenden, die auf die Fähigkeiten und Kompetenzen abgestimmt sind, die sie für eine erfolgreiche Berufslaufbahn brauchen.

Wir stehen erst am Anfang des Weges zu Post-Paper-Prüfungen, bei denen die Technologie so fester Bestandteil der Aufgabenstellung ist, dass ein Wechsel zu Stift und Papier bei einem technischen Problem während der Prüfung nicht mehr möglich ist. Das erfordert zwar einen Vertrauensvorschuss (es gibt keine einfache Rückfalloption), ist aber auch ein natürlicher nächster Schritt, sobald man mit der Software hinreichend vertraut ist. Uns hat die Whitelisting-Funktion in WISEflow, die den Zugriff auf festgelegte Dokumente oder Anwendungen erlaubt, geholfen, Grenzen zu verschieben. So sollten unsere Studierenden etwa Daten in einer Tabelle mit über 1.000 Zeilen analysieren und visualisieren oder auf Grundlage eines Kundenbriefings den Prototyp eines Spiels entwerfen. Diese Beispiele zeigen, wie sich Prüfungsaufgaben gestalten lassen, die Kreativität prüfen – eine Eigenschaft, die von Arbeitgebenden sehr geschätzt wird –, da es viele verschiedene Wege gibt, solche Aufgaben zu lösen.

Blick in die Zukunft

Wir haben in den letzten vier Jahren viel erreicht, aber wir beginnen gerade erst, uns der Herausforderung zu stellen, Pädagogik und Technologie so zu verbinden, dass unsere Studierenden echten Nutzen daraus ziehen. Die Vorreiter:innen unter den Lehrenden sind für den nächsten Schritt auf unserem Weg zum digitalen Prüfen wichtig, denn sie zeigen uns, was möglich ist, und beweisen, dass innovative Praxis für alle Lehrenden erreichbar sein kann. Wir blicken heute stärker als zuvor über den eigenen Tellerrand hinaus und finden Inspiration auf der anderen Seite der Welt (im wahrsten Sinne des Wortes!) – das von der australischen Regierung geförderte e-Exams-Projekt (2016) hat zum Ziel, Prüfungen an australischen Universitäten durch digitale BYOD-Prüfungen zu verändern, und seine Berichte und Ressourcen sind für alle, die gerade erst beginnen, sehr wertvoll.

Digitale BYOD-Prüfungen haben das Potenzial, das Prüfen zu verändern und Curriculumsreformen anzustoßen – sofern die Einrichtungen die nötige akademische Führung, Investitionen in Schulungen und Gelegenheiten zum Austausch guter Praxis bereitstellen. Auch wenn die Verantwortung eindeutig bei den Einrichtungen liegt, dies voranzutreiben, birgt eine Zusammenarbeit mit den Anbietern das Potenzial für eine Revolution des Prüfens: Die Spuren, die Tausende digitaler Abgaben hinterlassen, könnten eine reiche Informationsquelle dafür sein, wie Prüfen sowohl dem Lernen dienen als auch das Lernen messen kann. Lassen Sie uns die Zukunft gestalten!