title: INSIDE-Studie. Dokumentation der Skalierung der Kompetenzmessungen in den Bereichen Lesen und Mathematik des ersten Messzeitpunkts in der Jahrgangsstufe 6 (Kohorte 1)
Creators: name: Stegenwallner-Schütz, Maja
name: Obry, Michael
name: Wittmann, Elena
name: Gehrer, Karin
name: Nusser, Lena
name: Böhme, Katrin
Publisher: name: LIfBi Leibniz Institute for Educational Trajectories
Year: 2022
Subjects: subject: Kompetenzmessung
subject: Lesekompetenz
subject: mathematische Kompetenz
subject: schulische Inklusion
subject: Item-Response-Theorie
subject: competence tests
subject: reading competence
subject: mathematical competence
subject: inclusive education
subject: Item Response Theory

description: Die Studie Inklusion in der Sekundarstufe in Deutschland (INSIDE) untersucht die Umsetzung und die Gelingensbedingungen von Inklusion an allgemeinen Schulen in Deutschland, an denen Schülerinnen und Schüler mit sonderpädagogischem Förderbedarf gemeinsam mit Schülerinnen und Schülern ohne sonderpädagogische Förderbedarfe unterrichtet werden. Es wurden Kompetenztests für die Bereiche Leseverständnis und mathematische Kompetenzen eingesetzt, um den individuellen schulischen Kompetenzerwerb beschreiben zu können. Dazu wurden Testaufgaben der National Educational Panel Study (NEPS) verwendet, die teilweise adaptiert wurden und eine schwierigkeitsgestufte Zuweisung der Testversionen entwickelt. Das vorliegende Paper beschreibt das Studiendesign, die Testdurchführung sowie die Datenaufbereitung und –auswertung für die probabilistische Kompetenzmessung. An dem Lese- und dem Mathematiktest haben Schülerinnen und Schüler der Jahrgangsstufe 6 in der ersten Kohorte teilgenommen. Die Kompetenzdaten wurden mittels Partial-Credit-Modellen skaliert. Fehlende Werte, Itemfitstatistiken sowie Reliabilitätsmaße dienen der Überprüfung der Qualität der Testergebnisse. In den schwereren Testheftversionen konnten oftmals nicht alle Leseaufgaben bearbeitet werden, in leichteren Lesetestversionen und im Mathematiktest sehr wohl. Die Itemfitstatistiken und die Reliabilitätsmaße fallen insgesamt zufriedenstellend aus. Die Analysen zeigen, dass die Testpassung besser für Schülerinnen und Schüler in unteren und mittleren Leistungsbereichen als für die leistungsstärksten Schülerinnen und Schüler ausfällt. Das eingesetzte Testdesign eignet sich insgesamt zur Erfassung eines sehr heterogenen Fähigkeitsspektrums mit den erwünschten psychometrischen Eigenschaften.

The INSIDE study (acronym for the German translation of inclusive education in secondary schools in Germany) investigates the implementation and critical success factors of inclusive education at regular schools in Germany, that are being attended by both, students with and without special educational needs. Reading comprehension and mathematical competence were assessed through competence tests, in order to investigate students’ development in these domains. Tests contained slightly adapted stimuli from the National Educational Panel Study (NEPS). Crucially, we developed a test design that takes into account students’ different ability levels on a wide competence spectrum. This paper describes the study design, testing procedures, as well as data processing, and data analysis based on item response theory. Students of grade 6 participated in the reading test and the mathematical test in cohort 1. We used partial credit models for scaling the competence data. In order to evaluate the quality of the competence data, we analyzed missing values, item fits and test reliability. There was an increased number of items that were not reached toward the end of the hardest reading test versions due to time restrictions, unlike the easy and moderate reading test versions, or the mathematical test. Item fits and test reliability were satisfactory. In sum, test quality was better for students with low to moderate levels of competence in both the reading as well as the mathematics domains relative to students with the highest levels of competence. The tests yield the desired psychometric properties and therefore, prove suitable for the assessment of a heterogeneous ability spectrum.
description: LIfBi Working Papers, No. 108 (2022)