Im Vortrag gehe ich nach einer kurzen Motivation zur Notwendigkeit von offenen Online- und Präsenzprüfungen und einer Begründung, warum Proctoring typischerweise keine Lösung darstellt, auf Herausforderungen von Open-Book- und Open-Web-Prüfungsformaten ein. Danach beschreibe ich eigene Erfahrungen mit solchen Prüfungsformaten, die ich als Prüfer in ingenieurwissenschaftlichen Fächern an der Otto-von-Guericke-Universität sammeln konnte. Dazu zählen u.a. eine Take-Home-Prüfung, ein Open-Web-Präsenzprüfung mit Papier- bzw. Online-Einreichung, die Gruppenphase bei Präsenz-Leistungskontrollen sowie ein Konzept zu personalisierten Aufgaben mit anonymem Peer Review. Abschließend diskutiere ich Perspektiven zur Weiterführung und Weiterentwicklung solcher Prüfungskonzepte mit formativer vs. summativer Bewertung, einer Verbesserung der Feedback-Kultur, Peer Exams mit eingebautem und gewünschtem Austausch zwischen Studierenden oder einer Bewertung des Lösungsprozesses in Ergänzung zur reinen Bewertung des Ergebnisses einer Aufgabe.
Erfahrungen aus einer Open-Web-Präsenzprüfung mit Online-Einreichung in den G...
Digitale Prüfungen: so offen wie möglich, so sicher wie nötig - Digital Lunch an der Technischen Universität Dortmund
1. Digitale Prüfungen: so offen wie möglich, so sicher wie nötig
Digital Lunch an der Technischen Universität Dortmund
Mathias Magdowski
Lehrstuhl für Elektromagnetische Verträglichkeit
Institut für Medizintechnik
Otto-von-Guericke-Universität, Magdeburg
21. Juni 2022
Lizenz: cb CC BY 4.0 (Namensnennung, Weitergabe unter gleichen Bedingungen)
2. Motivation Probleme Praxis Perspektiven
Disclaimer
Quelle: https://www.pinterest.de/pin/838091811895246659/
Digitale-Prüfungen-Öffner 2
8. Motivation Probleme Praxis Perspektiven
Transformation benötigt immer einen Impuls
Digitale-Prüfungen-Öffner 6
9. Motivation Probleme Praxis Perspektiven
Transformation benötigt immer einen Impuls
Quelle: https://imgflip.com/i/6kcvjf
Digitale-Prüfungen-Öffner 6
10. Motivation Probleme Praxis Perspektiven
Zugrundeliegendes Problem
Eine reine Digitalisierung vorhandener analoger Prüfungsformate ohne
weitere Anpassung ist nicht zielführend.
Digitale-Prüfungen-Öffner 7
11. Motivation Probleme Praxis Perspektiven
Zugrundeliegendes Problem
Eine reine Digitalisierung vorhandener analoger Prüfungsformate ohne
weitere Anpassung ist nicht zielführend.
Thorsten Dirks, CEO von
Telefónica Deutschland:
„Wenn sie einen
Scheißprozess digitalisieren,
dann haben sie einen scheiß
digitalen Prozess.“
Quelle: E-Plus-Gruppe, CC BY 2.0,
https://commons.wikimedia.org/w/index.
php?curid=40920042
Digitale-Prüfungen-Öffner 7
16. Motivation Probleme Praxis Perspektiven
Imagine you go to some place and there is no Wi-Fi
Das Internet gehört intrinsisch zur Lebenswelt der Studierenden.
Man kann es in Lehrveranstaltungen und in Prüfungen nicht ausblenden.
Quelle: https://pixabay.com/de/photos/h%C3%A4nde-ipad-tablette-technologie-820272/
Digitale-Prüfungen-Öffner 10
17. Motivation Probleme Praxis Perspektiven
Warum kein Proctoring?
Proctor = Prüfungsaufseher*in
Quelle: https://commons.wikimedia.org/w/index.
php?curid=26564294
Digitale-Prüfungen-Öffner 11
18. Motivation Probleme Praxis Perspektiven
Warum kein Proctoring?
Proctor = Prüfungsaufseher*in
Quelle: https://commons.wikimedia.org/w/index.
php?curid=26564294
Online Proctoring is like . . .
Quelle: https:
//imgflip.com/memetemplate/78253868/Hal9000
Digitale-Prüfungen-Öffner 11
19. Motivation Probleme Praxis Perspektiven
Warum kein Proctoring?
Proctoring und Videofernüberwachung von Prüflingen in Online-Prüfungen
sind bei unpassenden Aufgaben entweder nutzlos oder unverhältnismäßig
gegenüber möglichen Betrugsversuchen von Studierenden.
Digitale-Prüfungen-Öffner 12
20. Motivation Probleme Praxis Perspektiven
Warum kein Proctoring?
Quelle: https://imgflip.com/i/51ts5v
Digitale-Prüfungen-Öffner 13
21. Motivation Probleme Praxis Perspektiven
Überblick
Motivation
Probleme – Was sollten wir beachten?
Praxis – Welche praktischen Erfahrungen gibt es?
Perspektiven – Was für Ideen gibt es für die Zukunft?
Digitale-Prüfungen-Öffner 14
23. Motivation Probleme Praxis Perspektiven
Ziele
Warum prüfen wir überhaupt?
▶ Das haben wir schon immer (so) gemacht!?
Digitale-Prüfungen-Öffner 16
24. Motivation Probleme Praxis Perspektiven
Ziele
Warum prüfen wir überhaupt?
▶ Das haben wir schon immer (so) gemacht!?
▶ Bewertung, Bepunktung, Benotung
Digitale-Prüfungen-Öffner 16
25. Motivation Probleme Praxis Perspektiven
Ziele
Warum prüfen wir überhaupt?
▶ Das haben wir schon immer (so) gemacht!?
▶ Bewertung, Bepunktung, Benotung
▶ Lernerfolgskontrolle
Digitale-Prüfungen-Öffner 16
26. Motivation Probleme Praxis Perspektiven
Ziele
Warum prüfen wir überhaupt?
▶ Das haben wir schon immer (so) gemacht!?
▶ Bewertung, Bepunktung, Benotung
▶ Lernerfolgskontrolle
▶ Feedback für die Lernenden
Digitale-Prüfungen-Öffner 16
27. Motivation Probleme Praxis Perspektiven
Herausforderungen
▶ Passung zur Lernmethode und den Lernzielen (Constructive Alignment)
Digitale-Prüfungen-Öffner 17
28. Motivation Probleme Praxis Perspektiven
Herausforderungen
▶ Passung zur Lernmethode und den Lernzielen (Constructive Alignment)
▶ Korrekturaufwand/Skalierbarkeit
Digitale-Prüfungen-Öffner 17
29. Motivation Probleme Praxis Perspektiven
Herausforderungen
▶ Passung zur Lernmethode und den Lernzielen (Constructive Alignment)
▶ Korrekturaufwand/Skalierbarkeit
▶ Authentizität & Originalität
Digitale-Prüfungen-Öffner 17
30. Motivation Probleme Praxis Perspektiven
Herausforderungen
▶ Passung zur Lernmethode und den Lernzielen (Constructive Alignment)
▶ Korrekturaufwand/Skalierbarkeit
▶ Authentizität & Originalität
▶ Datenschutz
Digitale-Prüfungen-Öffner 17
31. Motivation Probleme Praxis Perspektiven
Herausforderungen
▶ Passung zur Lernmethode und den Lernzielen (Constructive Alignment)
▶ Korrekturaufwand/Skalierbarkeit
▶ Authentizität & Originalität
▶ Datenschutz
▶ Rechtssicherheit
Digitale-Prüfungen-Öffner 17
32. Motivation Probleme Praxis Perspektiven
Herausforderungen
▶ Passung zur Lernmethode und den Lernzielen (Constructive Alignment)
▶ Korrekturaufwand/Skalierbarkeit
▶ Authentizität & Originalität
▶ Datenschutz
▶ Rechtssicherheit
▶ Transparenz & Chancengleichheit
Digitale-Prüfungen-Öffner 17
33. Motivation Probleme Praxis Perspektiven
Herausforderungen
▶ Passung zur Lernmethode und den Lernzielen (Constructive Alignment)
▶ Korrekturaufwand/Skalierbarkeit
▶ Authentizität & Originalität
▶ Datenschutz
▶ Rechtssicherheit
▶ Transparenz & Chancengleichheit
▶ Verfügbarkeit & Integrität
Digitale-Prüfungen-Öffner 17
37. Motivation Probleme Praxis Perspektiven
Weitere Fragestellungen:
▶ Wie schwierig und aufwendig wäre es, einer dritten fachfremden Person die
richtige Lösung der Prüfungsaufgabe zu erklären?
Digitale-Prüfungen-Öffner 19
38. Motivation Probleme Praxis Perspektiven
Weitere Fragestellungen:
▶ Wie schwierig und aufwendig wäre es, einer dritten fachfremden Person die
richtige Lösung der Prüfungsaufgabe zu erklären?
▶ Wie schlimm wäre es, wenn meine Prüfungsaufgaben (sinngemäß) frei
verfügbar sind?
Digitale-Prüfungen-Öffner 19
39. Motivation Probleme Praxis Perspektiven
Weitere Fragestellungen:
▶ Wie schwierig und aufwendig wäre es, einer dritten fachfremden Person die
richtige Lösung der Prüfungsaufgabe zu erklären?
▶ Wie schlimm wäre es, wenn meine Prüfungsaufgaben (sinngemäß) frei
verfügbar sind?
▶ Wie wäre es, wenn die Lernenden nie an der Lehrveranstaltung teilnehmen
und „nur“ die Prüfung absolvieren?
Digitale-Prüfungen-Öffner 19
40. Motivation Probleme Praxis Perspektiven
Weitere Fragestellungen:
▶ Wie schwierig und aufwendig wäre es, einer dritten fachfremden Person die
richtige Lösung der Prüfungsaufgabe zu erklären?
▶ Wie schlimm wäre es, wenn meine Prüfungsaufgaben (sinngemäß) frei
verfügbar sind?
▶ Wie wäre es, wenn die Lernenden nie an der Lehrveranstaltung teilnehmen
und „nur“ die Prüfung absolvieren?
▶ Wenn sich die Lernenden selbst prüfen könnten, wie weit wäre mein
Prüfungsformat davon entfernt?
Digitale-Prüfungen-Öffner 19
42. Motivation Probleme Praxis Perspektiven
Open-Book-Online-Prüfung
Bildquelle: https://pixabay.com/de/photos/studium-pr%C3%BCfungen-vorbereitung-951818/
Weitere Informationen: https://bit.ly/TakeHomePruefung
Digitale-Prüfungen-Öffner 21
43. Motivation Probleme Praxis Perspektiven
Open-Book-Prüfung in Präsenz
Weitere Informationen: https://bit.ly/OpenBookPruefung
Digitale-Prüfungen-Öffner 22
44. Motivation Probleme Praxis Perspektiven
Open-Book-Präsenzprüfung mit elektronischer Einreichung
Weitere Informationen:
https://twitter.com/MMagdowski/status/1523400987268239360
Digitale-Prüfungen-Öffner 23
46. Motivation Probleme Praxis Perspektiven
Gruppenphase bei Zulassungsklausuren
Weitere Informationen: https://bit.ly/Gruppenpruefung
Digitale-Prüfungen-Öffner 25
47. Motivation Probleme Praxis Perspektiven
Personalisierbare Aufgaben mit anonymem Peer Review
Weitere Informationen: https://youtu.be/LDw_Ifmg2WM
Digitale-Prüfungen-Öffner 26
48. Motivation Probleme Praxis Perspektiven
Online-Leistungskontrollen mit berechneten Fragen
Weitere Informationen: https://bit.ly/OnlineLK
Digitale-Prüfungen-Öffner 27
50. Motivation Probleme Praxis Perspektiven
Chancen
▶ formatives vs. summatives Prüfen
Digitale-Prüfungen-Öffner 29
51. Motivation Probleme Praxis Perspektiven
Chancen
▶ formatives vs. summatives Prüfen
▶ Prozess statt Resultat bewerten
Digitale-Prüfungen-Öffner 29
52. Motivation Probleme Praxis Perspektiven
Chancen
▶ formatives vs. summatives Prüfen
▶ Prozess statt Resultat bewerten
▶ Barrierefreiheit von Online-Prüfungen
(z. B. zum Vorlesen oder zur Übersetzung)
Digitale-Prüfungen-Öffner 29
53. Motivation Probleme Praxis Perspektiven
Chancen
▶ formatives vs. summatives Prüfen
▶ Prozess statt Resultat bewerten
▶ Barrierefreiheit von Online-Prüfungen
(z. B. zum Vorlesen oder zur Übersetzung)
▶ mehr Wert auf Feedback statt auf die Notenvergabe legen
Digitale-Prüfungen-Öffner 29
54. Motivation Probleme Praxis Perspektiven
Chancen
▶ formatives vs. summatives Prüfen
▶ Prozess statt Resultat bewerten
▶ Barrierefreiheit von Online-Prüfungen
(z. B. zum Vorlesen oder zur Übersetzung)
▶ mehr Wert auf Feedback statt auf die Notenvergabe legen
▶ Reform der Prüfungskultur −→ Veränderung der Lehr- und Lernkultur
Digitale-Prüfungen-Öffner 29
55. Motivation Probleme Praxis Perspektiven
Chancen
▶ formatives vs. summatives Prüfen
▶ Prozess statt Resultat bewerten
▶ Barrierefreiheit von Online-Prüfungen
(z. B. zum Vorlesen oder zur Übersetzung)
▶ mehr Wert auf Feedback statt auf die Notenvergabe legen
▶ Reform der Prüfungskultur −→ Veränderung der Lehr- und Lernkultur
▶ erlaubte Kollaboration und Kommunikation in Gruppenprüfungen
Digitale-Prüfungen-Öffner 29
57. Motivation Probleme Praxis Perspektiven
Schlüsselkompetenzen und fachliche Kompetenzen
Um die Kompetenzen des 4K-Modells (Kreativität, Kommunikation,
Kollaboration und kritisches Denken) zusammen mit fachlichen
Kompetenzen zu Prüfen, braucht es neue Prüfungsformate.
Digitale-Prüfungen-Öffner 31
58. Motivation Probleme Praxis Perspektiven
Medienkompetenz-Prüfungen
Mögliche Prüfungsformen:
▶ Erstellung von Erklärvideos durch
Studierende
▶ Video-Dokumentationen der
Lösung von Aufgaben
▶ Aufzeichnungen von Podcasts
▶ Blog-Artikel schreiben
▶ elektronische Portfolios
▶ Wikipedia-Artikel schreiben oder
übersetzen
Quelle: Pixabay https://pixabay.com/vectors/internet-web-page-video-article-3738875/
Digitale-Prüfungen-Öffner 32
60. Motivation Probleme Praxis Perspektiven
Kompetenzen vs. Inhalt
Quelle: https://imgflip.com/i/4shp2f
Digitale-Prüfungen-Öffner 33
61. Motivation Probleme Praxis Perspektiven
Was macht eine gute Prüfung aus?
„Gute“ Prüfungen sind:
▶ authentisch
Digitale-Prüfungen-Öffner 34
62. Motivation Probleme Praxis Perspektiven
Was macht eine gute Prüfung aus?
„Gute“ Prüfungen sind:
▶ authentisch
▶ zeitgemäß
Digitale-Prüfungen-Öffner 34
63. Motivation Probleme Praxis Perspektiven
Was macht eine gute Prüfung aus?
„Gute“ Prüfungen sind:
▶ authentisch
▶ zeitgemäß
▶ kompetenzorientiert
Digitale-Prüfungen-Öffner 34
64. Motivation Probleme Praxis Perspektiven
Was macht eine gute Prüfung aus?
„Gute“ Prüfungen sind:
▶ authentisch
▶ zeitgemäß
▶ kompetenzorientiert
▶ nicht „googlebar“
Digitale-Prüfungen-Öffner 34
65. Motivation Probleme Praxis Perspektiven
Was macht eine gute Prüfung aus?
„Gute“ Prüfungen sind:
▶ authentisch
▶ zeitgemäß
▶ kompetenzorientiert
▶ nicht „googlebar“
Stattdessen:
Straßenlampen-Effekt:
Dort suchen, wo es am am einfachsten scheint,
nicht wo es am relevantesten ist.
Quelle:
https://twitter.com/beatdoebeli/status/1444225274128879617
Digitale-Prüfungen-Öffner 34
66. Motivation Probleme Praxis Perspektiven
https://twitter.com/MarkusRidderbu8/status/
1523708966039351297
Vielen Dank für Ihre/Eure
Aufmerksamkeit!
Gibt es weitere Fragen?
Digitale-Prüfungen-Öffner 35
67. Motivation Probleme Praxis Perspektiven
Anonyme Fragen- und Chatwand
URL:
https://frag.jetzt/
Raum-Code:
12345678
Digitale-Prüfungen-Öffner 36