spelling |
oapen-20.500.12657-525012023-01-31T18:36:00Z Entwicklung und Pilotierung eines adaptiven Multistage-Tests zur Kompetenzerfassung im Bereich naturwissenschaftlichen Denkens (Volume 316) Brüggemann, Volker Social Science Statistics Education Psychology bic Book Industry Communication::J Society & social sciences::JH Sociology & anthropology::JHB Sociology::JHBC Social research & statistics bic Book Industry Communication::J Society & social sciences::JN Education bic Book Industry Communication::J Society & social sciences::JM Psychology In der aktuellen Kompetenzforschung werden diverse komplexe Konstrukte erfasst. Die verwendeten Leistungstests resultieren oft in langwierigen Befragungen von Studierenden, welche so einer hohen Testbelastung ausgesetzt werden. Damit gehen Nachteile, wie beispielsweise eine sinkende Teilnahmebereitschaft, einher. Auffallend ist daher der noch seltene Einsatz adaptiver Testformate. Diese weisen eine höhere Effizienz auf als lineare Formate, womit sie die Belastung senken und die Teilnahmebereitschaft erhöhen könnten. In dieser Arbeit wird die Anpassung eines bereits bestehenden Leistungstests von einem linearen in ein adaptives Format beschrieben. Grundlage des Vorhabens ist der Ko-WADiS-Test zur Erfassung der Kompetenz naturwissenschaftlichen Denkens bei Studierenden der Fächer Biologie, Chemie und Physik. Den Kern der Arbeit bilden die messtheoretische Rahmung adaptiver Testformate und die Konzeption des neuen Testinstruments. Aus den Items des linearen Tests wurden mehrere adaptive Teststrukturen entwickelt und in simulierten Befragungen verglichen. Ein Multistage-Test mit drei Stufen und jeweils zwei Schwierigkeitsniveaus wies die höchste Messeffizienz auf und wurde praktisch implementiert. Zum Abschluss der Testentwicklung wurden mit dem neuen Instrument Lehramtsstudierende befragt und Messgenauigkeit sowie Messdauer in der Stichprobe mit denen des linearen Ko-WADiS-Tests verglichen. Durch das neue Testformat konnte eine signifikante Steigerung der Effizienz um 53% (Messdauer -30%, Messgenauigkeit +8%) erreicht werden. 2022-01-20T05:30:45Z 2022-01-20T05:30:45Z 2021 book 9783832553319 9783832553319 https://library.oapen.org/handle/20.500.12657/52501 ger application/pdf n/a external_content.pdf Logos Verlag Berlin Logos Verlag Berlin https://doi.org/10.30819/5331 https://doi.org/10.30819/5331 1059eef5-b798-421c-b07f-c6a304d3aec8 9783832553319 9783832553319 Knowledge Unlatched (KU) Logos Verlag Berlin open access
|
description |
In der aktuellen Kompetenzforschung werden diverse komplexe Konstrukte erfasst. Die verwendeten Leistungstests resultieren oft in langwierigen Befragungen von Studierenden, welche so einer hohen Testbelastung ausgesetzt werden. Damit gehen Nachteile, wie beispielsweise eine sinkende Teilnahmebereitschaft, einher. Auffallend ist daher der noch seltene Einsatz adaptiver Testformate. Diese weisen eine höhere Effizienz auf als lineare Formate, womit sie die Belastung senken und die Teilnahmebereitschaft erhöhen könnten. In dieser Arbeit wird die Anpassung eines bereits bestehenden Leistungstests von einem linearen in ein adaptives Format beschrieben. Grundlage des Vorhabens ist der Ko-WADiS-Test zur Erfassung der Kompetenz naturwissenschaftlichen Denkens bei Studierenden der Fächer Biologie, Chemie und Physik. Den Kern der Arbeit bilden die messtheoretische Rahmung adaptiver Testformate und die Konzeption des neuen Testinstruments. Aus den Items des linearen Tests wurden mehrere adaptive Teststrukturen entwickelt und in simulierten Befragungen verglichen. Ein Multistage-Test mit drei Stufen und jeweils zwei Schwierigkeitsniveaus wies die höchste Messeffizienz auf und wurde praktisch implementiert. Zum Abschluss der Testentwicklung wurden mit dem neuen Instrument Lehramtsstudierende befragt und Messgenauigkeit sowie Messdauer in der Stichprobe mit denen des linearen Ko-WADiS-Tests verglichen. Durch das neue Testformat konnte eine signifikante Steigerung der Effizienz um 53% (Messdauer -30%, Messgenauigkeit +8%) erreicht werden.
|