TUGrade - Textaufgaben mit K.I. Assistenz für Bewertungen und Feedback

Aufgabentyp: TUGrade

TUGrade kurz vorgestellt:
Es ist ein Aufgabentyp, der für freie Textantworten entwickelt worden.
Ein K.I. Modell assistiert beim Bewerten und Feedback geben.
Das Modell kann Ihnen Antworten liefern auf die gestellte Aufgaben, die Sie verändern können oder direkt als Referenzantwort übernehmen können. Es liefert auf seine Antwort auch ein Feedback, was Sie ebenso anpassen können. Das Modell kann mit mehreren Referenzantworten und Beispielfeedbacks lernen.
Was Sie davon haben? Sie bekommen eine zweite Meinung zu einer Einreichung, die mit ca. 30 Worten pro Sekunde geschrieben wird (sobald eine Grafikkarte auf dem Serverrechner frei ist).

Der Aufgabentyp basiert auf der Masterthesis von Leon Camus. Er pflegt und wartet den Aufgabentyp und dessen Backend aktuell ehrenamtlich. Wenn Ihnen TUGrade gefällt und weiterentwickelt werden soll, dann sprechen Sie sich gegenüber dem Präsidium, der HDA-Leitung und in den Gremien positiv darüber aus, so dass die Weiterentwicklung durch eine Stelle und zusätzlicher Hardware gesichert wird.

TUGrade Aufgabe anlegen

Gehen Sie in einem Moodle Test in den Reiter Fragen und fügen hier eine Neue Aufgabe hinzu. Oder Sie verwenden die Fragensammelung und erstellen dort einen Neue Frage. Wählen Sie TUGrade Short answer aus.

Abbildung: Auswahl der Aufgabentypen

Kategorie und Fragetitel

Legen Sie Ihre Aufgaben sortiert in Kategorien ab. Das ist nichts Neues.
Der Fragetitel hat keinen Einfluss. Er dient nur der eigenen Sortierung. Die Studierenden werden Titel auch niemals sehen. Wie immer nur interne Verwendung.

Fragetext

Hier wird die Fragestellung oder der Arbeitsauftrag an Studierende bzw. Prüfungsteilnehmende gestellt. Das K.I. Modell verwendet dieses Textfeld nicht. Sie können hier alle Formatierungen anwenden die Sie möchten.

TUGrade Weboberfläche zur Token Generierung

Erreichbare Punkte

Hier werden lediglich die Maximalpunkte angegeben, welche die Aufgabe liefern darf. TUGrade ermittelt einen Prozentsatz für seine Bewertung, der dann mit den Maximalpunkten multipliziert wird.

Raw Question Text

In diesem Textfeld wird die Aufgaben oder Frage dem K.I. Modell gestellt. Diesen Text sehen die Prüfungsteilnehmenden oder Studierenden nicht. Wenn die Aufgabenstellung im Fragetext ein Befehl ist wie beispielsweise: "Nennen Sie die fünf Methoden des X... und erläutern Sie die Unterschiede zwischen den Methoden.", dann kann es durchaus Sinn machen, diese als Frage für die K.I. umzuformulieren oder zusätzlich zu stellen.
Das K.I. Modell kann Formatierungen aktuell Stand Janauar 2024 noch nicht besonders interpretieren, folglich ist der Editor beschränkt, damit die Verarbeitung sichergestellt ist.
Dem K.I. kann im Raw questuin text auch Informationen und Hinweise zur Beantwortung und Bewertung mitgegeben werden. Zusatzinformationen sind nach der Aufgabenstellung zu platzieren. Beispielsweise sind Rechtschreibefehler kein Abwertungsgrund oder die gegebenen Referenzlösungen sind nur Beispiele, aber keine erschöpfenden Antworten.
Es können einzelnen Worte oder Satzteile durch in CAPS-Lock geschriebenes zur genauere Beachtung durch das K.I. Modell erzwungen werden. Es ist Vorherhebung mit denen Texte priorisiert werden. Technisch gesprochen wird jeder Buchstabe mit der Genauigkeit eines Wortes behandelt. Einer Aufgabensteillung/Einreichung/Referenzlösung in TUGrade stehen aktuell 4096 Worte als maximale Länge zur Verfügung bevor es zu Einbrüchen in der Qualität kommt. Warnung extensiver Einsatz von CAPs-Lock Worten bewirkt am Ende nichts oder gar Verschlechterung. Nur wichtige Wörter hervorheben.

Context

Dies Textfeld wird aktuell noch nicht genutzt. In den nächsten Versionen, die im Laufe 2024 erscheinen werden soll das Textfeld Hintergrundwissen zur Aufgabenstellung aufnehmen, damit das K.I. Modell präzisier Antworten und Bewertungsfeedbacks erzeugen kann.
Weitere Bedienelemente wie Drop Zones für Textdokumente oder PDFs werden hinzukommen, um Hintergrundinformationen, Lehrmaterialien und Fachtexte dem K.I. Modell zuzuführen.

TUGrade URL und Token

Die URL https://tugrade.hda.onl beheimatet das Backend des TUGrade Dienstes. Aktuell ist nur dieser Knotenpunkt enthalten.
Es ist ein Token einzugeben. Sie erhalten einen Initialen Token. Generieren Sie auf der Webseite https://tugrade.hda.onl für jede TUGrade Aufgabe einen eigenen Token. Das Modell nutzt dies als Referenz für spezielle Daten, die bezüglich einer bestimmten Aufgabe entstehen.

Die Webseite https://tugrade.hda.onl