Versionen im Vergleich

Schlüssel

  • Diese Zeile wurde hinzugefügt.
  • Diese Zeile wurde entfernt.
  • Formatierung wurde geändert.

...

Bereich


Spalte
width80%


Deck of Cards
idzufallsziehung-main


Card
labelRandomisierung der AufgabenanordnungZufallsziehung von Aufgaben

Die Nutzung verschiedener Prüfungsversionen ist fester Bestandteil von klassischen Großkohortenprüfungen. Prüflingen soll es dabei erschwert werden, Lösungen miteinander zu teilen oder sich diese durch Abschreiben zu erhalten. Im digitalen Distanzsetting ist die klassische Nutzung von Prüfungsversionen weniger effektiv. Zwar werden damit Absprachen erschwert, da zuerst Kommiliton:innen mit der gleichen Version gefunden werden müssen. Sobald diese gefunden wurden, ist jedoch die Nutzung von verschiedenen Versionen nur noch wenig wirksam, um Absprachen zu verhindern.

Das Format E-Examinations@Home erlaubt jedoch einen noch höheren Grad der Individualisierung in der Nutzung von Prüfungsversionen. Hierbei werden nicht verschiedene vollständige Prüfungsversionen generiert, sondern es ist möglich, jede Aufgabe individuell für Prüflinge auszuwählen und damit hochindividualisierte Prüfungsversionen zu entwerfen.

Beispiel: es wird ein Aufgabenset mit 40 Aufgaben angelegt. Studierende müssen in der Prüfung jedoch nur 20 Aufgaben beantworten. Nun werden aus dem vollen Set 20 Aufgaben zufällig ausgewählt. Studierende müssten sich demnach bei jeder Aufgabe erneut abstimmen. Dies erhöht die benötigten Ressourcen zur Absprache enorm und macht den Aufwand zur Täuschung daher deutlich unattraktiver.

Bei der Zusammenstellung der einzelnen Prüfung für jede:n Studierende:n muss die Aufgabenreihenfolge sich nicht auf die in der Vorlage vorgegebene Anordnung beschränken. Mithilfe der Prüfungsplattform haben Sie die Möglichkeit, die Aufgaben nach bestimmten Kriterien zufällig anzuordnen. Eine zufällige Anordnung von Aufgaben erschwert Studierenden die Absprache untereinander, da Ressourcen darauf verwendet werden müssen, die Aufgaben ausfindig zu machen.

Sie können Aufgaben nach folgenden Kriterien randomisieren:

Eine vollständige Randomisierung
Hierbei werden alle Aufgaben der Prüfung zufällig für jeden Studierenden zusammengestellt, der Effekt der Täuschungsreduktion ist hier am größten.
  • Eine Randomisierung innerhalb von Themen und der Themen untereinander
    Haben Sie Ihre Aufgaben Themen zugeordnet und wollen, dass diese auch nur innerhalb des jeweiligen Themenbereichs angezeigt werden, haben Sie folgende Möglichkeiten:
      • Sie können die Aufgaben innerhalb des jeweiligen Themas randomisieren und
      • Sie können die Themen selbst randomisieren.

    Der Effekt der Täuschungsreduktion ist hier geringer, da Studierende anhand der Themengebiete die Aufgaben schneller finden und vergleichen können.

           3. Eine vollständige Randomisierung der Aufgaben mit Anzeige des Themas

    Sie können die Aufgaben auch wie in Nr. 1 beschrieben randomisieren und gleichzeitig die Themenzuordnung anzeigen. So erhalten Sie ein vergleichbares Maß an Täuschungsreduktion. Sie verlieren jedoch die Clusterung der Aufgaben unter dem jeweiligen Thema und die Darstellung der Aufgabenübersicht ist optisch durch den ständigen Wechsel der Themengebiete sehr unruhig. Wir raten daher von dieser Option tendenziell eher ab. 




    Spalte
    width20%


    Panel
    borderColor#99CC00
    titleColor#003366
    titleBGColor#99CC00
    borderStylesolid
    titleAnsprechpartner

    Bei Fragen und Beratungswünschen kontaktieren Sie uns gerne:

    Nils Hernes
    nils.hernes@cedis.fue-examinations@fu-berlin.de




    Bereich


    Spalte
    width80%


    Deck of Cards
    idlernzieltaxonomien-mainzufallsziehung2


    Card
    labelMöglichkeiten der Randomisierung

    Die vollständige Randomisierung aller Aufgaben aus einem Pool entspricht dabei jedoch selten den tatsächlichen Prüfungsmodalitäten. Prüfungen bestehen zumeist aus verschiedenen Aufgabentypen mit abweichenden Kompetenzzielen und Schwierigkeitsgraden. Daher ist es auch möglich, Aufgaben-Subsets zufällig zu ziehen.

    Bereich


    Spalte
    width60%


    Panel
    borderColorgreen
    borderStylesolid

    Ein Beispiel: Ihre Prüfung besteht aus drei Teilen:

    1. Teil: 20 Multiple-Choice-Aufgaben (aus 40 Aufgaben)
    2. Teil 10 Kurzantworten (aus 20 Aufgaben)
    3. Teil: 1 Essay (aus 3 Aufgaben)



    Spalte
    width40%



    Sie haben nun die Möglichkeit, für jeden Teil einen individuellen Aufgabenpool zu entwerfen, aus dem jeweils die 20 MC-Aufgaben, die 10 Kurzantwortaufgaben und der Essay gezogen werden. Sie können somit trotz pluraler Aufgabenformate, verschiedener Kompetenzmessungen etc. Zufallsziehungen ermöglichen.

    Dabei kann die Aufsplittung der Aufgabenpools noch weiter individualisiert werden. So können verschiedene Aufgabenpools für verschiedene Themengebiete und, wenn gewünscht, auch noch innerhalb der Themengebiete Unterthemen oder Aufgabengruppen mit den jeweiligen Aufgabenpools generiert werden.

    Bereich


    Spalte
    width60%


    Panel
    borderColorgreen
    borderStylesolid

    Ein Beispiel:

    1. Teil: Didaktik der Geschichtswissenschaft
      1. 5 Multiple-Choice-Aufgaben (aus 20 Aufgaben)
      2. 3 Drop-Down-Aufgaben (aus 15 Aufgaben)
      3. 1 Essay (aus 4 Aufgaben)
    2. Teil: Propädeutik der Geschichtswissenschaft
      1. 3 Multiple-Choice-Aufgaben (aus 20 Aufgaben)
      2. 1 Essay (aus 3 Aufgaben)



    Spalte
    width40%



    Eine weitere Möglichkeit der Unterteilung bietet die Ziehung von Aufgaben auf Basis Ihrer (eingeschätzten oder empirisch erfassten) Schwierigkeit. Ähnlich wie auf Basis von Themen Aufgabenpools angelegt werden können, können diese auch in Schwierigkeitskategorien eingeordnet werden.

    Bereich


    Spalte
    width60%


    Panel
    borderColorgreen
    borderStylesolid

    Ein Beispiel:

    1. Teil: Didaktik der Geschichtswissenschaft
      1. 5 einfache Aufgaben (Schwierigkeit > .8)
      2. 8 mittelschwere Aufgaben ( .2 < Schwierigkeit < .8)
      3. 3 schwere Aufgaben (Schwierigkeit <.2)



    Spalte
    width40%


    Sie können auch all diese Ebenen und Aspekte kombinieren:

    Bereich


    Spalte
    width60%


    Panel
    borderColorgreen
    borderStylesolid

    Ein Beispiel:

    1. Teil: Didaktik der Geschichtswissenschaft
      1. 5 Multiple-Choice-Aufgaben
        1. 2 einfache Aufgaben
        2. 2 mittelschwere Aufgaben
        3. 1 schwere Aufgabe
      2. 3 Drop-Down-Aufgaben
        1. 1 einfache Aufgabe
        2. 1 mittelschwere Aufgabe
        3. 1 schwere Aufgabe
      3. 1 Essay
        1. 1 mittelschwere Aufgabe
    2. Teil: Propädeutik der Geschichtswissenschaft
      1. 3 Multiple-Choice-Aufgaben
        1. 1 einfache Aufgabe
        2. 1 mittelschwere Aufgabe
        3. 1 schwere Aufgabe
      2. 1 Essay
        1. 1 schwere Aufgabe



    Spalte
    width40%


    Somit können Zufallsziehungen lokal eingegrenzt werden und trotzdem ein hohes Maß an Individualisierung und damit Robustheit gegenüber Absprachen bieten.




    Spalte
    width20%




    Bereich


    Spalte
    width80%


    Deck of Cards
    idzufallsziehung3


    Card
    labelVoraussetzungen

    Da aufgrund der individualisierten Ziehung der Aufgaben jede:r Studierende eine unterschiedliche Prüfungsversion erhält, ist es rechtlich zwingend notwendig, dass die Prüfung von mindestens zwei Prüfer:innen abgenommen wurde. Dabei muss vor allem sichergestellt werden, dass die jeweiligen Aufgabenversionen eines Subsets die gleiche Komplexität und Schwierigkeit aufweisen.

    Weichen bspw. zwei Versionen einer Rechenaufgabe soweit voneinander ab, dass zur Bearbeitung der zweiten Aufgabenversion 10 Minuten mehr benötigt werden, so ist hier die Gleichwertigkeit der Aufgabenversionen nicht mehr gegeben.




    Spalte
    width20%




    Bereich


    Spalte
    width80%


    Deck of Cards
    idzufallsziehung4


    Card
    labelUmsetzung

    Die Erstellung multipler Aufgabenversionen beansprucht mehr Zeit und ist aufwendiger als die Erstellung von nur einer einzelnen Version. Jedoch kann Zeit gespart werden, indem für die Erstellung von Aufgaben der grundsätzlich gleiche Aufbau gewählt wird, diese sich aber durch austauschbare Parameter unterscheiden, welche bei der Erstellung der Aufgabenvarianten einfach angepasst werden.

    Ein Beispiel:

    Bereich
    bordertrue


    Spalte
    width30%

    Aufgabe V1:

    Frau Hertz kauft 3 Äpfel, 4 Birnen und eine Melone.


    Wie viel Stück Obst hat Frau Hertz gekauft?

    Antwort: 8


    Spalte
    width30%

    Aufgabe V2:

    Frau Hertz kauft 5 Äpfel, 7 Birnen und 2 Melonen.


    Wie viel Stück Obst hat Frau Hertz gekauft?

    Antwort: 14


    Spalte
    width30%

    Aufgabe V3:

    Frau Hertz kauft 2 Äpfel, 3 Birnen und eine Melone.


    Wie viel Stück Obst hat Frau Hertz gekauft?

    Antwort: 6


    Dieses stark vereinfachte Beispiel zeigt, dass durch Nutzung von Parametern unkompliziert und ohne viel Aufwand verschiedene Versionen einer Aufgabe angelegt werden können. Bei komplexeren Beispielen unterscheiden sich die Lösungswege dann soweit, dass ein Austausch zwischen den Studierenden aufwändig und wenig zielführend wird.




    Spalte
    width20%




    Bereich


    Spalte
    width80%


    Deck of Cards
    idzufallsziehung5


    der Antwortmöglichkeiten
    Card
    labelZufallsziehung und Aufgabensets

    Oftmals bauen verschiedene Aufgaben aufeinander auf oder beziehen sich aufeinander. Auch in diesen Fällen ist eine Zufallsziehung mit verschiedenen Versionen von Aufgabensets möglich. In diesen Fällen wird dann immer das vollständige Aufgabenset einer Version gezogen

    Neben der Randomisierung der Aufgaben selbst, können Sie auch die Anzeige der Antwortoptionen randomisieren. Dies ist momentan jedoch nur für Single- und Multiple-Choice-Aufgaben möglich.

    Die Randomisierung der Anzeige von Antwortmöglichkeiten kann Absprachen unter den Studierenden teilweise verringern, da nicht die Position der Antwort, sondern allein deren Inhalt relevant für die Beantwortung ist und die Lokalisierung der richtigen Antwort somit Zeit kostet.






    Spalte
    width20%