Open Access

Christian Gärtner, Anna Moraß, Sara Koss, Silvia Garbusa, Sibylle Matern, Ina Innermann

• Die Studie analysiert Einsatz, Nutzen und Grenzen von ChatGPT und Large Language Modellen (LLMs) in der Lehre an bayerischen Hochschulen für angewandte Wissenschaften (HAWs). Sie basiert auf einer schriftlichen Onlinebefragung und leitfadengestützten Interviews unter Lehrenden, Studierenden und Funktions-trägerinnen und -träger. Insgesamt nahmen 1570 Personen an der Onlineumfrage teil und es wurden 27 Interviews geführt. Zwar variieren die Ergebnisse je nach Befragtengruppe, aber tendenziell lassen sich folgende Einschätzungen auf Basis der empirischen Daten treffen: → Die meisten Teilnehmenden haben ein geringes Verständnis der Nutzbarkeit von LLMs und deren technologischer Funktionsweise. Die Nutzbarkeit von Open Source LLMs oder domänenspezifisch trainierten LLMs für das eigene Fachgebiet kennt der Großteil der Teilnehmenden (überhaupt) nicht oder nur teilweise. → Die Einsatzhäufigkeit von ChatGPT bzw. LLMs in Lehre, Studium und Arbeitsalltag ist noch gering, vor allem wegen fehlender sinnvoller Einsatzmöglichkeiten, mangelnderDie Studie analysiert Einsatz, Nutzen und Grenzen von ChatGPT und Large Language Modellen (LLMs) in der Lehre an bayerischen Hochschulen für angewandte Wissenschaften (HAWs). Sie basiert auf einer schriftlichen Onlinebefragung und leitfadengestützten Interviews unter Lehrenden, Studierenden und Funktions-trägerinnen und -träger. Insgesamt nahmen 1570 Personen an der Onlineumfrage teil und es wurden 27 Interviews geführt. Zwar variieren die Ergebnisse je nach Befragtengruppe, aber tendenziell lassen sich folgende Einschätzungen auf Basis der empirischen Daten treffen: → Die meisten Teilnehmenden haben ein geringes Verständnis der Nutzbarkeit von LLMs und deren technologischer Funktionsweise. Die Nutzbarkeit von Open Source LLMs oder domänenspezifisch trainierten LLMs für das eigene Fachgebiet kennt der Großteil der Teilnehmenden (überhaupt) nicht oder nur teilweise. → Die Einsatzhäufigkeit von ChatGPT bzw. LLMs in Lehre, Studium und Arbeitsalltag ist noch gering, vor allem wegen fehlender sinnvoller Einsatzmöglichkeiten, mangelnder Qualität der Ergebnisse und rechtlicher Bedenken. Die ChatGPT-Plusversion wird von den meisten Teilnehmenden nie genutzt. → Die wahrgenommene Nützlichkeit der Einsatzszenarien von ChatGPT variiert je nach ChatGPT-Version und Zielgruppe, wobei das Zusammenfassen und die Verbesserung von Texten als nützlich eingeschätzt werden. → Ein Verbot von ChatGPT wird überwiegend abgelehnt. Stattdessen besteht seitens der Lehrenden und Studierenden der Wunsch nach vermehrter Aufklärung über die Chancen und Grenzen von ChatGPT und Co. Zudem erhoffen sie sich finanzielle, technische und didaktische Unterstützung durch die Hochschulen. → Die Teilnehmenden sehen ChatGPT als eine Chance zur Verbesserung der Lehre, aber auch als eine Herausforderung für die Prüfungskultur, die rechtliche Sicherheit und die Kompetenzentwicklung. • In Bezug auf zukünftig notwendige Kompetenzen wird angemerkt, dass es zu einem Kompetenz-verlust bei den Studierenden als Konsequenz der ChatGPT-Nutzung kommen kann. • Die Frage nach der rechtlichen Sicherheit bezieht sich nicht nur auf mögliche Datenschutz- oder Copyrightverletzungen, sondern auch auf das Prüfungswesen. • Die Art und Weise von Prüfungen wird sich ändern (müssen), wobei mehrere Optionen thematisiert werden: von der Kennzeichnungspflicht bei der Nutzung von ChatGPT und Co. über den Wegfall reiner Wissensabfragen in Prüfungen bis hin zu den Ideen, keine theoretischen Bachelorarbeiten mehr zu vergeben und vermehrt mündliche Prüfungen einzusetzen. Die Studie schließt mit einer Diskussion über die Rolle und Tragweite der generativen KI in der Hoch-schullehre und gibt Hinweise auf Materialien für die Gestaltung von innovativen und verantwortungs-vollen Lernszenarien…
• The study analyses use, benefits, and limitations of ChatGPT and Large Language Models (LLMs) in teaching at Bavarian universities of applied sciences. It is based on a written online survey and guideline-based interviews with teachers, students, and functionaries. A total of 1,570 individuals participated in the on-line survey, and 27 interviews were conducted. Although results vary depending on the respondent group, the following general trends can be estab-lished on empirical data: → Most participants only have limited understanding of the usability of ChatGPT or LLMs and the underlying technology. The majority of participants is not (at all) or only partially familiar with open-source LLMs and LLMs specifically trained for their field. → The usage frequency of ChatGPT or LLMs in teaching, studying and daily professional life is still low, mainly due to the lack of meaningful application possibilities, the poor quality of results, and legal concerns. The ChatGPT Plus version is hardly used at all. → The perceived usefulnessThe study analyses use, benefits, and limitations of ChatGPT and Large Language Models (LLMs) in teaching at Bavarian universities of applied sciences. It is based on a written online survey and guideline-based interviews with teachers, students, and functionaries. A total of 1,570 individuals participated in the on-line survey, and 27 interviews were conducted. Although results vary depending on the respondent group, the following general trends can be estab-lished on empirical data: → Most participants only have limited understanding of the usability of ChatGPT or LLMs and the underlying technology. The majority of participants is not (at all) or only partially familiar with open-source LLMs and LLMs specifically trained for their field. → The usage frequency of ChatGPT or LLMs in teaching, studying and daily professional life is still low, mainly due to the lack of meaningful application possibilities, the poor quality of results, and legal concerns. The ChatGPT Plus version is hardly used at all. → The perceived usefulness of application scenarios varies by version and target group, with text summarization and text improvement being rated as useful. → A ban on ChatGPT is predominantly rejected. Instead, teachers and students want more information about the opportunities and limitations of ChatGPT and similar tools. They are also hoping for financial, technical and didactic support from universities. → The participants see ChatGPT as an opportunity to improve teaching, but also as a challenge for examination practices, legality, and competency development. • Concerning competencies required in the future, it is noted that the use of ChatGPT may lead to a loss of competencies among students. • The question of legality not only encompasses data protection or copyright violations, but also examination practices. • The way examinations are conducted will (have to) change, with several options being discussed: from mandatory labelling when ChatGPT and similar tools are used to the elimination of knowl-edge tests to the idea of no longer assigning theoretical Bachelor‘s theses and increasing the use of oral exams. The study concludes with a discussion of the role and scope of generative AI in higher education teaching and provides insights on materials for designing innovative and responsible learning scenarios.…