Zufallsziehung

Die Nutzung verschiedener Prüfungsversionen ist fester Bestandteil von klassischen Großkohortenprüfungen. Prüflingen soll es dabei erschwert werden, Lösungen miteinander zu teilen oder sich diese durch Abschreiben zu erhalten. Im digitalen Distanzsetting ist die klassische Nutzung von Prüfungsversionen weniger effektiv. Zwar werden damit Absprachen erschwert, da zuerst Kommiliton:innen mit der gleichen Version gefunden werden müssen. Sobald diese gefunden wurden, ist jedoch die Nutzung von verschiedenen Versionen nur noch wenig wirksam, um Absprachen zu verhindern.

Das Format E-Examinations@Home erlaubt jedoch einen noch höheren Grad der Individualisierung in der Nutzung von Prüfungsversionen. Hierbei werden nicht verschiedene vollständige Prüfungsversionen generiert, sondern es ist möglich, jede Aufgabe individuell für Prüflinge auszuwählen und damit hochindividualisierte Prüfungsversionen zu entwerfen.

Beispiel: es wird ein Aufgabenset mit 40 Aufgaben angelegt. Studierende müssen in der Prüfung jedoch nur 20 Aufgaben beantworten. Nun werden aus dem vollen Set 20 Aufgaben zufällig ausgewählt. Studierende müssten sich demnach bei jeder Aufgabe erneut abstimmen. Dies erhöht die benötigten Ressourcen zur Absprache enorm und macht den Aufwand zur Täuschung daher deutlich unattraktiver.

Die vollständige Randomisierung aller Aufgaben aus einem Pool entspricht dabei jedoch selten den tatsächlichen Prüfungsmodalitäten. Prüfungen bestehen zumeist aus verschiedenen Aufgabentypen mit abweichenden Kompetenzzielen und Schwierigkeitsgraden. Daher ist es auch möglich, Aufgaben-Subsets zufällig zu ziehen.

Sie haben nun die Möglichkeit, für jeden Teil einen individuellen Aufgabenpool zu entwerfen, aus dem jeweils die 20 MC-Aufgaben, die 10 Kurzantwortaufgaben und der Essay gezogen werden. Sie können somit trotz pluraler Aufgabenformate, verschiedener Kompetenzmessungen etc. Zufallsziehungen ermöglichen.

Dabei kann die Aufsplittung der Aufgabenpools noch weiter individualisiert werden. So können verschiedene Aufgabenpools für verschiedene Themengebiete und, wenn gewünscht, auch noch innerhalb der Themengebiete Unterthemen oder Aufgabengruppen mit den jeweiligen Aufgabenpools generiert werden.

Eine weitere Möglichkeit der Unterteilung bietet die Ziehung von Aufgaben auf Basis Ihrer (eingeschätzten oder empirisch erfassten) Schwierigkeit. Ähnlich wie auf Basis von Themen Aufgabenpools angelegt werden können, können diese auch in Schwierigkeitskategorien eingeordnet werden.

Sie können auch all diese Ebenen und Aspekte kombinieren:

Somit können Zufallsziehungen lokal eingegrenzt werden und trotzdem ein hohes Maß an Individualisierung und damit Robustheit gegenüber Absprachen bieten.

Da aufgrund der individualisierten Ziehung der Aufgaben jede:r Studierende eine unterschiedliche Prüfungsversion erhält, ist es rechtlich zwingend notwendig, dass die Prüfung von mindestens zwei Prüfer:innen abgenommen wurde. Dabei muss vor allem sichergestellt werden, dass die jeweiligen Aufgabenversionen eines Subsets die gleiche Komplexität und Schwierigkeit aufweisen.

Weichen bspw. zwei Versionen einer Rechenaufgabe soweit voneinander ab, dass zur Bearbeitung der zweiten Aufgabenversion 10 Minuten mehr benötigt werden, so ist hier die Gleichwertigkeit der Aufgabenversionen nicht mehr gegeben.

Die Erstellung multipler Aufgabenversionen beansprucht mehr Zeit und ist aufwendiger als die Erstellung von nur einer einzelnen Version. Jedoch kann Zeit gespart werden, indem für die Erstellung von Aufgaben der grundsätzlich gleiche Aufbau gewählt wird, diese sich aber durch austauschbare Parameter unterscheiden, welche bei der Erstellung der Aufgabenvarianten einfach angepasst werden.

Ein Beispiel:

Dieses stark vereinfachte Beispiel zeigt, dass durch Nutzung von Parametern unkompliziert und ohne viel Aufwand verschiedene Versionen einer Aufgabe angelegt werden können. Bei komplexeren Beispielen unterscheiden sich die Lösungswege dann soweit, dass ein Austausch zwischen den Studierenden aufwändig und wenig zielführend wird.

Oftmals bauen verschiedene Aufgaben aufeinander auf oder beziehen sich aufeinander. Auch in diesen Fällen ist eine Zufallsziehung mit verschiedenen Versionen von Aufgabensets möglich. In diesen Fällen wird dann immer das vollständige Aufgabenset einer Version gezogen.