TY - RPRT A1 - Wellhöfer, Peter R. A1 - Wellhöfer, Barbara T1 - Online-Self-Assessment Modul A und C der G-S-Ohm Hochschule Nürnberg. Aufgabenanalyse und Weiterentwicklung des allgemeinen Teils des OSA T1 - Online-Self-Assessment Modul A and C from the G-S-Ohm University of applied science. Itemanalysis and development of the general part of the assessment. N2 - Das Online-Self-Assessment der Georg-Simon-Ohm Hochschule steht seit Juli 2009 den Interessenten an einem technischen Studium zur Verfügung. Es besteht aus drei Teilmodulen: Grundmodul A „Allgemeine Voraussetzungen für ein technisches Studium“, Modul B „Fakultätsspezifische Wissensvoraussetzungen“ und Modul C „Resonanzfragen und persönliche Daten“. Die vorliegende Untersuchung konzentriert sich auf die Rahmenstruktur Modul A und C, die bei jedem unserer Selbsteinstufungsverfahren vorgegeben wird. Die fakultätsspezifischen Aufgaben (Modul B) werden gesondert analysiert und überarbeitet. Bis zum Stichtag (23.12.2010) hatten sich 1597 Probanden zur Testbearbeitung angemeldet; von ihnen haben 1011 bisher die Assessments vollständig bearbeitet. Die Motivation zur Bearbeitung war unterschiedlich: 429 TeilnehmerInnen suchten Hilfe zur Studienwahlentscheidung (eigentliche Zielgruppe), 216 bearbeiteten es aus Forschungsinteresse/Interesse an Tests generell, 201 gaben sonstige Gründe an und die restlichen 165 beantworteten diese Frage nicht. Ziel der vorliegenden Untersuchung ist es, die Qualität der einzelnen fakultätsunspezifischen Module (aus testtheoretischer Sicht) zu beurteilen, den Erfolg der bisherigen Aufgabenanalysen zu überprüfen und die Testnormen auf den aktuellen Stand zu bringen. Dazu wurden die einschlägigen teststatistischen Kennwerte (Schwierigkeits-, Trennschärfe und Reliabilitätsindex nach Cronbach; Prozentrangwerte) bestimmt. Nach den Ergebnissen der Itemanalyse können die Aufgabengruppen aller Module aus testtheoretischer Sicht in der vorliegenden Form als zuverlässig bezeichnet werden. Damit wird sicher gestellt, dass den StudieninteressentInnen ab dem Sommersemester 2011 ein Beratungsverfahren zur Verfügung steht, das den Gütekriterien wissenschaftsorientierter Testverfahren entspricht, soweit dies bei der aktuellen Datensituation möglich ist. Durch die vergangenen Aufgabenanalysen konnte Modul A deutlich gestrafft werden: Von den ursprünglich 119 Fragen/Aufgaben blieben 80 übrig. Dies entspricht einer Reduktion auf 67,2 Prozent bei konstanter und teilweise sogar verbesserter Zuverlässigkeit. Aus dem Datenmaterial der „eigentlichen Zielgruppe“ (TeilnehmerInnen, die Hilfe bei der Studienwahlentscheidung suchen) berechneten wir für das Modul A die Testnormen und entsprechenden Messwertgrenzen für die Interpretation der Teilmodule. Damit steht auch die qualitative Rückmeldung auf einer zuverlässigen empirischen Basis. Parallel zur vorliegenden Untersuchung wurden die Aufgaben der fakultätsspezifischen Module B überprüft und durch die Elimination nicht zuverlässiger Aufgaben qualitativ verbessert und verkürzt. Die Konsequenzen dieser Auswertungen werden in die überarbeiteten Versio-nen bis Beginn des Sommersemesters 2011 eingearbeitet sein. KW - Studierfähigkeitstest KW - Online-Self-Assessment KW - Studieneignung KW - Studienberatung KW - Itemanalysis KW - Testentwicklung Y1 - 2011 U6 - http://nbn-resolving.de/urn/resolver.pl?urn:nbn:de:bvb:92-opus-894 ER - TY - RPRT A1 - Wellhöfer, Peter R. A1 - Wellhöfer, Barbara T1 - Befragung der TeilnehmerInnen am Online-Self-Assessment der Fakultät Angewandte Chemie (WS 2010/11) N2 - Die vorliegende Untersuchung versucht die Erfahrungen der Studienanfänger in der Fakultät Angewandte Chemie mit dem bisherigen Studium und dem Online-Self-Assessment zu erfassen. Dazu wurden in zwei aufeinander folgenden Pflichtlehrveranstaltungen des Grundstudiums 52 Studierende schriftlich befragt. Nach den Ergebnissen sind die bisherigen Erfahrungen positiv bis ambivalent: Übungen, Praktika, Tutorien und Lehrveranstaltungen werden als praxisnah und interessant beschrieben. Der Schwerpunkt der Beanstandungen konzentriert sich auf die Struktur und Organisation des Studienplans und der Lehrveranstaltungen. Das Online-Self-Assessment als Bestandteil der Bewerbung um den Studienplatz wird von der Mehrheit akzeptiert, da es einerseits gut informiert, andererseits eine Rückmeldung/Bestätigung der Studieneignung liefert. Diejenigen, die sich allerdings schon fest für das Studium Angewandte Chemie entschieden haben, finden diese „Pflichtübung“ als überflüssig und plädieren für eine freiwillige Bearbeitung. Die Mehrzahl der Befragten bezeichnet die Übereinstimmung zwischen dem Ergebnis des Assessments und den Studienerfahrungen als zufrieden stellend bis sehr gut. Dies spricht für die Validität des Verfahrens. Auch die Verbindung der Fragebogendaten mit den Assessmentergebnissen weist klar in diese Richtung. Leider konnte das Rechenzentrum die Verbindung nur bei 18 Teilnehmern (über die Email mit der sie sich angemeldet hatten) herstellen. Die berechneten Korrelationen zwischen den einschlägigen Kriterien entsprechen den Validitätserwartungen, müssen aber wegen der unbefriedigenden empirischen Basis durch weitere Untersuchungen bestätigt werden. KW - Studierfähigkeitstest KW - Online-Self-Assessment KW - Studieneignung KW - Studienberatung KW - Resonanzanalyse auf Pflicht-Self-Assessment KW - Validierung von Online-Self-Assessments Y1 - 2011 U6 - http://nbn-resolving.de/urn/resolver.pl?urn:nbn:de:bvb:92-opus-903 ER -