Nicolas Schwenke’s research while affiliated with Bauhaus-Universität Weimar and other places

The release of the large language model-based chatbot ChatGPT 3.5 in November 2022 has brought considerable attention to the subject of artificial intelligence, not only to the public. From the perspective of higher education, ChatGPT challenges various learning and assessment formats as it significantly reduces the effectiveness of their learning and assessment functionalities. In particular, ChatGPT might be applied to formats that require learners to generate text, such as bachelor theses or student research papers. Accordingly, the research question arises to what extent writing of bachelor theses is still a valid learning and assessment format. Correspondingly, in this exploratory study, the first author was asked to write his bachelor’s thesis exploiting ChatGPT. For tracing the impact of ChatGPT methodically, an autoethnographic approach was used. First, all considerations on the potential use of ChatGPT were documented in logs, and second, all ChatGPT chats were logged. Both logs and chat histories were analyzed and are presented along with the recommendations for students regarding the use of ChatGPT suggested by a common framework. In conclusion, ChatGPT is beneficial for thesis writing during various activities, such as brainstorming, structuring, and text revision. However, there are limitations that arise, e.g., in referencing. Thus, ChatGPT requires continuous validation of the outcomes generated and thus fosters learning. Currently, ChatGPT is valued as a beneficial tool in thesis writing. However, writing a conclusive thesis still requires the learner’s meaningful engagement. Accordingly, writing a thesis is still a valid learning and assessment format. With further releases of ChatGPT, an increase in capabilities is to be expected, and the research question needs to be reevaluated from time to time.

Problem Seit etwa einem Jahr steht nun das Künstliche-Intelligenz (KI)-Werkzeug-ChatGPT zur Verfügung. Insbesondere in Text-intensiven Lehr-Lernformaten kann ChatGPT-offiziell oder inoffiziell-eingesetzt werden. Abschlussarbeiten zählen zu derartigen Formaten. Es fehlen jedoch Erfahrungen zu den tatsächlichen Auswirkungen des Einsatzes von ChatGPT auf Abschlussarbeiten. Entsprechend wurde der Erstautor im Selbstversuch beauftragt, bei der Erstellung seiner Bachelorarbeit zum Thema KI in der Hochschullehre immer wenn möglich auf ChatGPT zurückzugreifen. Um die Auswirkungen von ChatGPT nachvollziehen zu können, wurde methodisch ein autoethnographischer Ansatz gewählt. Zum einen wurden alle Überlegungen zur möglichen Nutzung von ChatGPT in Protokollen dokumentiert, zum anderen wurden alle ChatGPT-Chats historisiert. Sowohl die Protokolle aus auch die Chatverläufe wurden analysiert. Die Ergebnisse werden zusammen mit den von Gimpel et al. (2023) vorgeschlagenen Empfehlungen für Studierende zur Nutzung von ChatGPT vorgestellt. Entsprechend werden Herausforderungen und Potenziale des Einsatzes von ChatGPT identifiziert. Zusammenfassend ist das Schreiben einer Abschlussarbeit immer noch ein gültiges Lern-und Prüfungsformat. Allerdings ist mit weiteren Versionen von ChatGPT ein Zuwachs an Leistungsfähigkeit zu erwarten, entsprechend ist von Zeit zu Zeit eine Neubewertung erforderlich.