Prüfungsformen im KI-Zeitalter bewertet

Wie prüfen wir im Zeitalter von ChatGPT und Co.? Derzeit werden sowohl Prüfungsformate, die die Nutzung von KI ausschließen, als auch KI-integrierende Prüfungsformate diskutiert. Doch welche davon sind didaktisch und praktisch sinnvoll im Zeitalter der textgenerierenden KI?
In mehreren Umfragen und Workshops sowohl mit Studierenden als auch mit Lehrenden haben wir Vorschläge für Prüfungsformate gesammelt, von „klassischen“ Klausuren bis hin zu innovativen Prüfungsformaten, in denen die Nutzung von KI obligatorisch ist. Die Vorschläge wurden kategorisiert und auf didaktischer Ebene unter Verwendung der Lern-Taxonomie von Anderson & Krathwohl (2001) bewertet. Zudem wurde aber auch die „Praxisbrille“ aufgesetzt: Welche Prüfungen sind realistischerweise in die Hochschulpraxis integrier- und ausreichend skalierbar? Die Ergebnisse deuten darauf hin, dass eine technologieoffene Prüfungspraxis, die KI integriert, entscheidende Vorteile in beiden Bereichen bietet.

Literacy: Anderson, L. W., & Krathwohl, D. R. (2001). A Taxonomy for Learning, Teaching and Assessing. Revision of Bloom’s Taxonomy of Educational Objectives. Abridged Edition. Longman. Bloom, B. S., Engelhart, M. D., Furst, E. J., Hill, W. H., & Krathwohl, D. R. (1956). Taxonomy of educational objectives: The classification of educational goals. Handbook I: Cognitive domain. David McKay Company. Buck, I., & Limburg, A. (2023). Hochschulbildung vor dem Hintergrund von Natural Language Processing (KI-Schreibtools). die hochschullehre, 9/2023, 70–84. https://doi.org/10.3278/ HSL2306W Budde, J., Tobor, J., & Beyermann, J. (2023). Blickpunkt Digitale Prüfungen. Hochschulforum Digitalisierung. https://hochschulforumdigitalisierung.de/sites/default/files/dateien/HFD_Blickpunkt_Digitale_Pruefungen.pdf Gimpel, H., Hall, K., Decker, S., Eymann, T., Lämmermann, L., Mädche, A., Röglinger, M., Ruiner, C., Schoch, M., Schoop, M., Urbach, N., & Vandirk, S. (2023). Unlocking the Power of Generative AI Models and Systems such as GPT-4 and ChatGPT for Higher Education. Universität Hohenheim. https://wiso.uni-hohenheim.de/fileadmin/einrichtungen/wiso/Forschungsdekan/Papers_BESS/dp_2023-02_online.pdf Gogoll, J., Heckmann, D., & Pretschner, A. (2023, März 23). Endlich neue Prüfungen dank ChatGPT! FAZ.NET. https://www.faz.net/aktuell/wirtschaft/digitec/endlich-neue-pruefungen-dank-chatgpt-18760199.html Haverkamp, H. (2022, Oktober 30). Ein Lehrer lässt KI bei Klassenarbeiten zu – das hat er dabei gelernt. THE-DECODER.de. https://the-decoder.de/ein-lehrer-laesst-ki-bei-klassenarbeiten-zu-das-hat-er-dabei-gelernt/ Huang, K. (2023, Januar 16). Alarmed by A.I. Chatbots, Universities Start Revamping How They Teach. The New York Times. https://www.nytimes.com/2023/01/16/technology/chatgpt-artificial-intelligence-universities.html Jochim, J. & Lenz-Kesekamp, V. (2024). Prüfen im Zeitalter von ChatGPT und Co. In: A. Buche, G. Graeßner & K. Becker: In Lehren und Prüfen – Empirische Ergebnisse und Reflexionen zu Hochschulen der Zukunft. Apollon University Press. van Dis, E. A. M., Bollen, J., Zuidema, W., van Rooij, R., & Bockting, C. L. (2023). ChatGPT: Five priorities for research. Nature, 614(7947), 224–226. https://doi.org/10.1038/d41586-023-00288-7 von Garrel, J., Mayer, J., & Mühlfeld, M. (2023). Künstliche Intelligenz im Studium Eine quantitative Befragung von Studierenden zur Nutzung von ChatGPT & Co. [Application/pdf]. 2616 KB, 84 pages. https://doi.org/10.48444/H_DOCS-PUB-395 Weßels, D., Mundorf, M., & Wilder, N. (2022). ChatGPT ist erst der Anfang. Hochschulforum Digitalisierung – Hochschulbildung im digitalen Zeitalter. https://hochschulforumdigitalisierung.de/de/blog/ChatGPT-erst-der-anfang