Multiple-Choice-Fragen

Rechtliches

Seit dem 01.04.2022 gelten für Multiple-Choice-Aufgaben neue Regelungen. Das Dezernat II hat die allgemeine Prüfungsordnung überarbeitet, dabei wurde §23 APB angepasst.

Neue Regelungen

Ab dem Sommersemester 2022 müssen für jede richtige angekreuzte Antwortmöglichkeit bei Multiple-Choice-Fragen Teilpunkte bzw. Punktanteile vergeben werden. Falsche Antworten müssen neutral behandelt werden – Es dürfen keine Punkte abgezogen werden. Zusätzlich muss angegeben werden, wie viele Antwortmöglichkeiten richtig sind. Wenn zu viele Kreuze gesetzt werden, führt das zu 0 Punkten.

Hinweis: Fast alle Formen Multiple-Choice-Aufgaben sind Antwortwahlverfahrensaufgaben. Prinzipiell können Multiple-Choice-Aufgaben auch verwendet werden um komplexe, also zusammengesetzte Antworten, mit einer Art Baukasten aus verschiedenen Teilantworten formulieren zu lassen. Bei letzterem Vorgehen liegt kein Antwortwahlverfahren vor, weil die zutreffende Antwort nicht offen zu sehen ist.

Zusammenfassung

Kein All or Nothing erlaubt
Keine negative Bewertung in den Auswahloptionen
Single-Choice hat keine Änderungen
Durch manuelle Erweiterung des Aufgabentextes ist volle automatisierte Auswertung möglich für Antwortwahlverfahrensaufgaben möglich.
Multiple-Choice-Aufgaben müssen nicht zwingend Antwortwahlverfahrensaufgaben sein (Beispiel Antwort aus Baukasten zusammenklicken)

Features des Aufgabentyps

Auswahloptionen: Zufällige oder feste Reihenfolge
Auswahloptionen: Verschiedene Gewichtungen in der Bewertung [nicht bei Single Choice]
Single Choice oder Multiple Choice: Single Choice hat andere Benutzerführung – Die Angabe der zu markierenden Auswahlmöglichkeiten ist nicht notwendig
Durchnummerieren der Auswahloptionen
Begrenzung der setzbaren Haken auf die geforderte Anzahl -> Verwenden Sie hierfür das später vorgestellte Skript
Einfügen von Bilder, Videos, Tabellen, Zeichnungen, LaTeX in den Auswahloptionen
Hinweis auf den Aufgabentyp berechnete Multiple-Choice mit gewissen Aufgabengeneratorfunktionen

Erstellen von Multiple Choice Aufgaben

Nun navigieren Sie zu dem Kurs, in dem sich der Test befindet. Wählen Sie nun das Zahnrad oben rechts aus. Gehen Sie auf Fragensammlung und anschließend auf Fragen. Hier klicken Sie auf Neue Frage erstellen und steuern die Multiple-Choice-Frage an. Klicken Sie nun auf Hinzufügen. Wählen Sie die passende Kategorie zu Ihrer Frage aus. Falls noch keine Kategorie erstellt wurde, stellen Sie sicher, dass der Name der neuen Kategorie eindeutig ist. (Beispiel: Klausur - Technische Mechanik 2 - Wise 2021/2022 - 12.3.2022) Es ist zu beachten, dass alle Pflichtfelder ausgefüllt sein müssen. Diese sind mit einem rot markierten Ausrufezeichen gekennzeichnet. Der Fragetitel muss vergeben werden und sollte aussagekräftig sein, um Ihre Frage später in der Übersicht wiederzufinden. Auch dieser sollte eindeutig sein, damit Übersichtlichkeit gewährleistet wird. (Beispiel: Programmieraufgabe - Sose2022 K - Verlinkte Liste nach Key-Größe filtern mit Schleife) [Beispieltext vorher festlegen] Im Fragetext schreiben Sie die Aufgabenstellung und die Anzahl der richtigen Antworten auf. [Beispieltext vorher festlegen] Dies ist sehr wichtig, da es laut der allgemeinen Prüfungsordnung Pflicht ist die Anzahl der richtigen Antworten anzugeben. Falls Sie eine Single-Choice-Frage erstellen, müssen Sie die Anzahl der Antworten nicht in die Aufgabenstellung schreiben, da dies von Moodle in den Fall angezeigt wird. Bei der Option eine oder mehrere Antworten wählen Sie aus, ob Sie eine Single-Choice-Frage oder Multiple-Choice-Frage erstellen möchten. Für dieses Video wird die Option "mehrere Antworten erlauben" benutzt. Unter Antworten mischen legen Sie fest, ob Teilnehmende unterschiedlich gemischte Reihenfolgen erhalten sollen, wenn diese die Frage vorgelegt bekommen. Es empfiehlt sich diese Option immer einzuschalten, weil so Abschreiben erschwert wird. In den Beispielen zeigen wir auch, dass eine feste Reihenfolge durchaus berechtigt sein kann. Sie können auch die Wahlantworten nummerieren, z.B. durch abc oder 123. Mit der Option Standart-Anweisungen anzeigen bestimmen Sie, ob angezeigt werden soll, dass es möglicherweise mehrere Antworten gibt. Mit dieser Option wird aber nicht die genaue Anzahl der Antworten angezeigt, weswegen diese Einstellung nicht die Anforderungen der allgemeinen Prüfungsordnung erfüllt. [Auslassen oder anmachen was führt Ihr vor? Meiner Meinung nach aus] Weiter unten schreiben Sie die Wahlantworten auf und wählen aus, welche die richtigen Optionen sind. Die Wahlantworten können auch aus Bilder, Videorecordings , etc. bestehen. [was schönes einbauen: hier ein Bild, da eine Formel…] Bei Bewertung setzen Sie einen Prozentwert, der sich auf die Gesamtpunktzahl für die Frage bezieht und vergeben wird, wenn diese Antwortoption ausgewählt wird. Hierbei können die Punkte auch asymmetrisch vergeben. Die Punkte der Aufgabe werden im Inhalt des Tests eingestellt, die dann mit den erreichten % multipliziert werden. [ruhig mal asymmetrische % vergeben] [Punkte Vergabe im Inhalt des Test zeigen] Mehr zu den Themen Test konfigurieren und Prüfungsdesign in den Videos …. Unter Feedback kann zu jeder Antwortoption ein spezifisches Feedback gegeben werden. [ruhig mal ein eine Begründung abliefern und woanders nicht, weil offensichtlich richtig oder falsch] Sie können auch unter Kombiniertes Feedback für jede richtige, falsche oder teilweise richtige Antwort ein Feedback hinterlegen. Wenn Sie mit den Einstellungen der Multiple-Choice-Frage fertig sind, klicken Sie auf den Button Änderungen speichern. Mit dem Klick auf die Lupe, können Sie sich die Frage in Vorschau anzeigen lassen. Wenn die Option "mehrere Antworten erlauben" auf nein gesetzt wird, sieht die Multiple-Choice-Frage so aus. (Wir zeigen eine Single-Choice-Frage aus der Fragensammlung)

Beiinformation: Sprungmarke: voll automatisierte Bewertung einstellen Beitext: JAVA Script einfügen zum Kopieren Screencast machen wie das Script eingefügt wird und wie es eingestellt wird. Wie bereits am Anfang des Videos erwähnt, sind 0 Punkte zu vergeben, wenn zu viele Kreuze gesetzt werden. Durch ein Java-Skript, welches in die MC-Frage eingebaut werden muss, wird die Anzahl der Kreuze eingeschränkt, die gesetzt werden können. Hierdurch kann nicht nur ein versehentliches Setzen von vielen Kreuzen verhindert werden, sondern die MC-Frage kann nun auch automatisch bewertet werden. Wir stellen das Script nun auf die Anzahl der Kreuze in der Aufgabe ein. [todo: Zeile nennen des Scriptes und was Ihr eintragt] Ohne dieses Skript ist es nicht möglich die MC-Frage automatisch von Moodle bewerten zu lassen. Grund dafür ist: durch die Vorgabe nicht zutreffende Auswahloptionen neutral bewerten zu müssen, können Prüfungsteilnehmende einfach alle Auswahloptionen ankreuzen und hätten zunächst volle Punktzahl – Sie müssten dann selbst analysieren, ob zu viele Kreuze gesetzt wurden. Also JAVA-Script einbauen! Wir gehen nun in die Vorschau um zu überprüfen, ob das Script arbeitet wie gewünscht. [TODO: an der Stelle zeigen, dass nicht mehr als vorgesehen viele Kreuze gesetzt werden] Wie sehen können nun höchstens X Kreuze gesetzt werden

Beispiele Nun möchten wir Ihnen einige Beispiele vorstellen, wie man eine MC-Frage erstellen kann. Erstes Beispiel : [TODO Thema: Vorschlag technische Mechanik Lagerreaktion ] [M.Sc. Boarding Exam for AE, MB -> Technische Mechanik Sose 2022 – deu -> FKB DE, Gleichgewichtsbedingungen in Y-Richtung DE] Einstellungen:

Mischen an
Durchnummerierung aus
MC Beiinformationen: Sprungmarke: Beispiel: MC mit Bilder, Zeichnungen, Formeln Videospur: technische Mechanik Aufgaben aus FB 16 Zulassungsprüfung Bilder von richtigen und falschen Freikörperbilder einfügen LaTex von Gleichgewichtsbedingungen einfügen (richtige und falsche) Zahlenwerte als Ergebnisse einfügen (richtige und falsche -> Av=…)

[TODO: inhalte vorbereiten] In diesem Beispiel sind verschiedene Skizzen, Thesen und Berechnungsmodelle angegeben, von denen die richtigen auszuwählen sind. Wie Sie sehen, ist es nicht immer ästhetisch die Antwortoptionen zu mischen. Trotzdem ist es sinnvoll die Antworten zu mischen. Wir fügen nun das Java Script und stellen dieses ein. Hinweis: die Materialien vorzubereiten ist nicht alleine in Moodle möglich. Nutzen Sie für Bilder nach Möglichkeit PNG, SVG für Bilder mit Text, Graphen, Diagramm oder Ähnliches. Nutzen Sie JPG ausschließlich für Fotos oder Ähnliches – keine Schrift! Hinweis die Zahlenwerte können durch den Aufgabentyp: berechnetes MC automatisiert geändert werden! Das ist nachhaltiges Vorgehen insbesondere, wenn die Materialien aufwendig waren.

Zweites Beispiel: Antwort aus Baukasten zusammensetzen Beiinformatioen: Sprungmarke: MC-Aufgabe als nicht Antwortwahlverfahrensaufgabe einsetzen – Baukasten Videospur: Frage wird erstellt Einstellungen:

Mischen an
Durchnummerierung aus
MC
Keine Angabe über die setzenden Kreuze stattdessen ein Hinweis auf Begrenzung der Kreuze auf X.
Hinweis geben: Kein Antwortwahlverfahren, Punktabzug bei falschen Kreuzen (z.B. 1 Punkte pro richtiges und 0,5P Abzug pro falsches -> TODO Etwas passendes ausdenken Aufgabe: wählen Sie alle Faktoren des Terms aus. [TODO: Beispiel aussuchen z.B. https://moodle-exam.tu-darmstadt.de/question/question.php?returnurl=%2Fquestion%2Fedit.php%3Fcourseid%3D189%26cat%3D9046%252C66644%26recurse%3D0%26showhidden%3D0%26qbshowtext%3D0&courseid=189&id=36220] Da können ein paar Kräfte verbaut werden, Faktoren a,b, sin(alpha), cos(alpha), (a+b), (a-b), ein paar Faktoren als Nenner 1/a, 1/b, 1/(a+b), 1/(a-b) usw.] [Zu finden in Batcave -> Gute Beispiele für Aufgabentypen -> Momentengleichgewicht (de + eng)] Bei Baukastenaufgaben sind unbedingt klare Handlungsanweisungen zu geben, sonst ist wird für eine Bewertung eine manuelle Auswertung notwendig. Beispielsweise: Wenn Klammern in math Ausdrücke nicht notwendig sind, dann sollen diese nicht gewählt werden. Wenn es eine Wahl gibt mehrere Antwortoptionen zu wählen, die das gleiche modellieren, dann ist die linke oder erste Option zu wählen. Hier ist es nicht notwendig Anzahl der Kreuze anzugeben, weil die Antwort zusammengebaut werden muss. Begrenzung der Kreuze ist sinnvoll. Vorschlag ein Kreuz mehr zulassen notwendig. Die falschen Kreuze können mit wenigen negativen Punkte belegt werden. Das klappt bei jeder Form von Term. Bei logischen Ausdrücken kann das auch klappen. Wenn viele Terme für eine Summe gebraucht, dann macht es Sinn mehrere dieser Aufgaben nacheinander zu stellen. Es kann nützlich sein, dass das Mischen ausgeschaltet ist, wenn die Reihenfolge der Wahloptionen erhalten bleibt, dann können auch Summenformeln in einer Aufgabe zusammengeklickt werden.

[TODO: kurze Sequenz zeigen. Z.B. Momentengleichgewicht M_A : 0 = [x]- [x]a [ ] b [ ]/ [ ]( [ ]a [ ]b [ ]+ [ ]- [ ]a [ ] b [ ]) [ ]+ [ ]- [x]sin(alpha) [ ]cos(alpha) [ ] tan(alpha) [x] F [ ]A_V [ ]A_H [ ] B [x]+ [ ]- [x]a [ ] b [ ]/ [ ]( [ ]a [ ]b [x]+ [ ]- [ ]a [x] b [ ]) [ ]+ [ ]- A_V [ ]A_H [x] B [x]

Drittes Beispiel: Programmcode Beiinformationen: Videospur: Frage wird erstellt Sprungmarke: Prozessablauf durch MC abfragen Einstellungen:

Mischen aus
Durchnummerierung an
MC Aufgabe wählen Sie die Programmzeilen für ein Programm das folgende Aufgabe löst: [TODO: (Sortierer bieten sich glaub ich 2 Schleifen, Vergleich und ein paar Checker vorm Algo)] [public static void selectionSort(int[] array) { for (int i = 0; i < array.length; i++) { int min = array[i]; int minId = i; for (int j = i+1; j < array.length; j++) { if (array[j] < min) { min = array[j]; minId = j; } } // swapping int temp = array[i]; array[i] = min; array[minId] = temp; } }] In die Antwortoptionen werden die notwendigen richtigen Zeilen in korrekter Reihenfolge eingefügt. Dazwischen werden plausible falsche Zeilen gepackt. Das können beispielsweise falsche Zeilenvarianten sein bezüglich des Vergleichs oder Zählung oder ähnliches. Das lässt sich auch auf Berechnungen bzw. Umformungen von mathematischen Ausdrücken anwenden. Aufgabenstellungen über das Beschreiben von Prozessen in mehreren Schritten, kann so vorgegangen werden.

Negativ Beispiel 1: schlechte Auswahloptionen Beiinformationen: Videospur: Frage wird erstellt Sprungmarke: schlechte Auswahloptionen Nun haben wir auch noch ein paar Negativ-Beispiels vorbereitet. Hier sehen Sie, dass die Anzahl der zu setzenden Kreuze nicht angeben wurde, die Antwortmöglichkeiten sehr einfach sind und eine Antwortmöglichkeit nichts mit den anderen Antwortmöglichkeiten zu tun hat. Negativ Beispiel 2: negative Punkte Beiinformationen: Videospur: Frage wird erstellt Sprungmarke: negative Punkte Hier sehen Sie, dass negative Punkte vergeben werden, wenn eine falsche Antwortoption ausgewählt wird. Dies ist nach der allgemeinen Prüfungsordnung nicht zulässig.

Negativ Beispiel 3: schlechte Bilder Im letzten Negativ-Beispiel sehen Sie, dass die richtigen Antwortmöglichkeiten sehr ähnlich sind und die falschen nichts mit der Frage zu tun haben. Dies ist nicht empfehlenswert, da es die Beantwortung der Fragen sehr einfach macht.

Berechnete MC Beiinformationen: Videospur: berechnete_mc_bild.png zeigen Sprungmarke: Berechnete MC Falls Sie nur Berechnungen in Ihrer MC-Frage abfragen möchten, können Sie auch den Fragentyp „berechnete Multiple-Choice“ verwenden. Dafür hinterlegen Sie Formeln mit Platzhaltern als Antwortmöglichkeiten. Moodle setzt dann für diese Platzhalter Zahlenwerte ein, welche in einem Rahmen randomisiert werden können. Hierdurch sie viele Varianten bei Ihren berechneten MC-Fragen erzeugen können. Sie können auch Relationen oder Operatoren in Ihren Gleichungen vertauschen.

Variieren von MC Aufgaben Beiinformationen: Videospur: Kategorie hinzufügen zeigen Sprungmarke: Variieren von MC Aufgaben Einige Tipps zum Variieren der Antwortmöglichkeiten bei normalen MC-Fragen ist es Aussagen zu negieren oder ähnliche Aussagen zu verwenden. Wenn Sie Aufgaben variieren, sollten Sie diese in einer Kategorie ablegen, falls Sie diese als Zufallsaufgaben benutzen möchten. (Kurz den Klickweg zeigen wo die Kategorien zu finden sind. Eine Kategorie anlegen und eine Aufgabe verschieben.) Benennen Sie die Kategorie am Besten so: Klausur - Technische Mechanik 2 - Wise 2021/2022 - 12.3.2022 – Aufgabe 4 - Zufallsaufgaben Zufallsaufgaben werden genauer in einem anderen Video erklärt. Diese Aufgaben lassen Sie eine Kategorie auswählen aus welcher Fragen zufällig in der Prüfung ausgewählt werden.