Mathias Magdowski Profile picture
Mitarbeiter am @LehrstuhlEMV an der @OVGUpresse, twittert hier aber rein aus privatem Interesse. Mastodon: @MMagdowski@bildung.social

Jan 18, 2023, 13 tweets

Heute Abend ist noch unsere semesterliche #OnlineLeistungskontrolle in den #GrundlagenDerElektrotechnik, die wie immer über das Lernmanagementsystem Moodle als klassisches kompetenzorientiertes Open-Book- und Open-Web-Assessmentformat stattfindet.
Zeitraum: 19 Uhr bis 21 Uhr

Die Studies sind wie immer pünktlich zur #OnlineLeistungskontrolle.
Schon 5 Minuten nach Beginn haben über 50 Studierende den Test begonnen, für den sie dann jeweils 90 min Zeit haben.

Alle Studierenden bekommen (wegen der Vergleichbarkeit) die gleichen 30 Fragen bzw. kurzen Rechenaufgaben, allerdings in unterschiedlicher und fest vorgegebener Reihenfolge und mit unterschiedlichen Zahlenwerten.
Die Ergebnistabelle füllt sich so langsam.

Spannend ist, dass ich diesmal neben den automatisch bewertbaren numerischen Aufgaben auch zwei Freitextfragen eingebaut habe, deren Inhalt ich hier natürlich (noch) nicht verraten kann und die ich dann noch manuell bewerten muss. #OnlineLeistungskontrolle

Ich bin gespannt, wie viele Antworten sehr ähnlich oder exakt wortgleich sind und wie oft die mutmaßlich studentische Antwort einige typische Fehlkonzepte von #ChatGPT repliziert, die ich vorher natürlich mal kurz getestet habe.

Scheinbar nutzen die Studierenden gerade auch massiv #ChatGPT, denn die Webseite ist mal wieder überlastet. 😉

Mit oder ohne #ChatGPT (und natürlich auch viel eher mit @wolframalphacom, @GnuOctave, @MATLAB oder @LTspice), die Tabelle mit den Ergebnissen der #OnlineLeistungskontrolle füllt sich langsam.
Knapp zur Hälfte Zeit haben etwa 80 Studies begonnen und die ersten abgegeben.

Diese studentische Antwort zum Auftrag
"Man antworte und begründe die Antwort in Satzform."
wurde vermutlich eher nicht von #ChatGPT formuliert. 😉
Leute, wenn ich einen Zahlenwert wissen möchte, hätte ich den numerischen Fragentyp benutzt. ¯\_(ツ)_/¯ #OnlineLeistungskontrolle

So, die heutige #OnlineLeistungskontrolle ist jetzt durch. Die Ergebnisse sind so lala, nicht überragend, aber auch nicht durchgehend schlecht.
Die zwei manuell zu bewertenden Aufgaben fehlen auch noch und eventuell gibt es dementsprechend noch ein paar Korrekturen nach oben.

Im Zoom-Meeting & meiner Bürotelefonhotline für Fragen blieb es weitgehend still.
Ein Student hat nicht verstanden, dass man nur einen Versuch hat. Ein anderer Student hat fälschlicherweise die #OnlineLeistungskontrolle vom letzten Semester gelöst, die noch zur Probe online war.

#ChatGPT war wie zu erwarten eher weniger hilfreich, lieferte es doch sachlich falsche Antworten auf die gesuchten Fragen oder funktioniert einfach gar nicht.

Beim Durchsehen der Freitextantworten sind mir sehr viele Tippfehler (z.B. 'Wiederstand' statt Widerstand und 'Gleitwert' statt Leitwert, obwohl beide Wörter in der Frage vorkamen) und Grammatikfehler (Sätze ohne Verb, kompletter Verzicht auf Satzzeichen) aufgefallen.

Nach Auswertung der Freitextantworten, bei denen auch ein paar exakt wortgleiche Plagiate dabei waren, sieht die Verteilung der Gesamtpunktzahl der #OnlineLeistungskontrolle eigentlich so wie immer aus:

Share this Scrolly Tale with your friends.

A Scrolly Tale is a new way to read Twitter threads with a more visually immersive experience.
Discover more beautiful Scrolly Tales like this.

Keep scrolling