Zusammenfassung
Das Nationale Bildungspanel (NEPS) untersucht seit 2009 Bildungsverläufe in Deutschland. In sechs Startkohorten werden bildungsrelevante Kompetenzen und Prädiktoren in regelmäßigen Abständen vom Neugeborenen- bis zum Erwachsenenalter erfasst. Im Rahmen der Schulkohorten (Startkohorte 3 im 5. Jahrgang; Startkohorte 4 im 9. Jahrgang) wurde eine Serie von Machbarkeitsstudien an Förderschulen mit dem Schwerpunkt Lernen implementiert. Diese hatten das Ziel, empirisch zu überprüfen, ob und wenn ja, wie Schüler*innen mit einem sonderpädagogischen Förderbedarf Lernen (SPF-L) angemessen in die längsschnittliche Untersuchung des NEPS einbezogen werden können, um valide und aussagekräftige Ergebnisse zu erhalten. Im Rahmen der NEPS-Erhebungen werden neben unterschiedlichen Kompetenztests (z. B. Lesen, Metakognition, Mathematik) auch schriftliche Fragebögen eingesetzt. Für Erhebungen an Förderschulen wurden die unterschiedlichen Instrumente angepasst und in experimentellen Variationen administriert. Der vorliegende Beitrag skizziert deren Design, liefert einen Überblick der zentralen Erkenntnisse der bisher veröffentlichten Ergebnisse und diskutiert die Implikationen für die Einbeziehung von Schüler*innen mit SPF-L in groß angelegte Bildungsstudien.
Abstract
The National Educational Panel (NEPS) has been investigating educational trajectories in Germany since 2009. In six starting cohorts, competences and predictors relevant to educational outcomes are assessed regularly from early childhood to adulthood. Within the framework of the two school cohorts (starting cohort 3 in 5th grade; starting cohort 4 in 9th grade), a series of feasibility studies were implemented at special schools. It was the aim to empirically examine whether and, if so, how students with a special educational need in the area of learning (SEN-L) can be adequately included in the longitudinal assessment of the NEPS in order to obtain valid and meaningful data. In addition to various competence tests (e.g. reading, metacognition, mathematics), written questionnaires are also administrated within the NEPS surveys. For assessments at special schools, the different instruments were adapted and administered in experimental variations. The present paper outlines the design of the feasibility studies, provides an overview of the central findings published so far and discusses the implications for the integration of students with SEN-L in large-scale studies.
This is a preview of subscription content, log in via an institution to check access.
Access this chapter
Tax calculation will be finalised at checkout
Purchases are for personal use only
Notes
- 1.
Diese Annahme trifft auf jegliche Veränderung von Testmaterial zu, unabhängig davon, welche Art von Behinderung bei den Teilnehmenden vorliegt.
- 2.
Zusätzlich werden im NEPS etappenspezifische Maße erhoben (Weinert et al. 2011), auf die an dieser Stelle nicht näher eingegangen wird.
- 3.
Eine detaillierte Darstellung aller Designvariationen und Akkommodationen über alle Erhebungswellen hinweg sind in Nusser et al. (in Vorbereitung) zu finden. Zudem erfolgte in einer querschnittlichen Studie im 3. Jahrgang eine experimentelle Variation und Erweiterung der Testinstruktion (Nusser und Weinert 2017).
- 4.
Für weitere Informationen zur Ziehungsprozedur siehe Aßmann et al. (2011).
- 5.
Der Bild-Zahlen-Test wurde in dieser Studie nicht untersucht.
- 6.
DIF: Unter Kontrolle der Fähigkeit der Schüler*innen sind einzelne Aufgaben für eine bestimmte Gruppe mit spezifischen Merkmalen (z. B. SPF-L) systematisch schwieriger zu lösen (Roussos und Stout 2004).
- 7.
In der Originalarbeit wird dieses Testheft easy genannt.
- 8.
Fragen zum familiären Hintergrund wurden zu Beginn der Befragung administriert und nicht rotiert.
Literatur
Artelt, C., Weinert, S., & Carstensen, C. H. (2013). Assessing competencies across the lifespan within the German National Educational Panel Study (NEPS)-Editorial. Journal for Educational Research Online, 5(2), 5–14.
Aßmann, C., Steinhauer, H. W., Kiesl, H., Koch, S., Schönberger, B., Müller-Kuller, A., et al. (2011). Sampling designs of the National Educational Panel Study: Challenges and solutions. Zeitschrift Für Erziehungswissenschaft, 14(2), 51–65. https://doi.org/10.1007/s11618-011-0181-8.
Autorengruppe Bildungsberichterstattung. (2018). Bildung in Deutschland 2018: Ein indikatorengestützter Bericht mit einer Analyse zu Wirkungen und Erträgen von Bildung. Bielefeld: Bertelsmann.
Beddow, P. A., Kurz, A., & Frey, J. R. (2011). Accessibility theory: Guiding the science and practice of test item design with the test-taker in mind. In S. N. Elliott, R. J. Kettler, P. A. Beddow, & A. Kurz (Hrsg.), Handbook of accessible achievement tests for all students (S. 163–182). New York: Springer.
Blossfeld, H.-P., Roßbach, H.-G., & von Maurice, J. (2011). Education as a lifelong process. The German National Educational Panel Study (NEPS). Zeitschrift Für Erziehungswissenschaft, 14, 2.
Borgers, N., De Leeuw, E. D., & Hox, J. (2000). Children as respondants in survey research: Cognitive development and response quality. Bulletin de Methodologie Sociologique, 66, 60–75.
Bos, W., Müller, S., & Stubbe, T. C. (2010). Abgehängte Bildungsinstitutionen: Hauptschulen und Förderschulen. In G. Quenzel & K. Hurrelmann (Hrsg.), Bildungsverlierer. Neue Ungleichheiten (S. 375–397). Wiesbaden: Springer.
Brunner, M., Lang, F. R., & Lüdtke, O. (2014). Erfassung der fluiden kognitiven Leistungfähigkeit über die Lebensspanne im Rahmen der National Educational Panel Study: Expertise (NEPS Working Paper No. 42). https://www.neps-data.de/Portals/0/Working%20Papers/WP_XLII.pdf.
Cormier, D. C., Altman, J., Shyyan, V., & Thurlow, M. L. (2010). A summary of the research on the effects of test accommodations: 2007–2008. Technical Report 56. National Center on Educational Outcomes, University of Minnesota. http://eric.ed.gov/?id=ED511744.
Cox, M. L., Herner, J. G., Demczyk, M. J., & Nieberding, J. J. (2006). Provision of testing accommodations for students with disabilities on statewide assessments: Statistical links with participation and discipline rates. Remedial and Special Education, 27(6), 346–353. https://doi.org/10.1177/07419325060270060401.
Dietze, T. (2012). Zum Stand der sonderpädagogischen Förderung in Deutschland. Die Schulstatistik 2010/11. Zeitschrift für Heilpädagogik, 63(1), 26–31.
Fischer, L., Rohm, T., Gnambs, T., & Carstensen, C. H. (2016). Linking the data of the competence tests (NEPS Survey Paper No. 1). Bamberg: Leibniz Institute for Educational Trajectories, National Educational Panel Study.
Frahm, S., Goy, M., Kowalski, K., Sixt, M., Strietholt, R., Blatt, I., et al. (2011). Transition and development from lower secondary to upper secondary school. Zeitschrift Für Erziehungswissenschaft, 14(2), 217–232. https://doi.org/10.1007/s11618-011-0188-1.
Fuchs, L. S., & Fuchs, D. (2001). Helping teachers formulate sound test accommodation decisions for students with learning disabilities. Learning Disabilities Research & Practice, 16(3), 174–181.
Gebhardt, M., Sälzer, C., Mang, J., Müller, K., & Prenzel, M. (2015). Performance of students with special educational needs in Germany: Findings from Programme for International Student Assessment 2012. Journal of Cognitive Education and Psychology, 14(3), 343–356. https://doi.org/10.1891/1945-8959.14.3.343.
Gehrer, K., & Artelt, C. (2013). Literalität und Bildungslaufbahn: Das Bildungspanel NEPS. In C. Rosebrock & A. Bertschi-Kaufmann (Hrsg.), Literalität erfassen: Bildungspolitisch, kulturell, individuell (S. 168–187). Weinheim: Beltz-Juventa.
Gehrer, K., Zimmermann, S., Artelt, C., & Weinert, S. (2012). The assessment of reading competence (including sample items for grade 5 and 9). https://www.neps-data.de/Portals/0/NEPS/Datenzentrum/Forschungsdaten/SC4/1-0-0/com_re_2012_en.pdf.
Gehrer, K., Zimmermann, S., Artelt, C., & Weinert, S. (2013). NEPS framework for assessing reading competence and results from an adult pilot study. Journal for Educational Research Online, 5(2), 50–79.
Gnambs, T., & Nusser, L. (2019). The longitudinal measurement of reasoning abilities in students with special educational needs. Frontiers in Psychology, 10. https://doi.org/10.3389/fpsyg.2019.00232.
Gresch, C., & Piezunka, A. (2015). Schülerinnen und Schüler mit sonderpädagogischer Förderung (im Bereich „Lernen“) an Regelschulen. In P. Kuhl, P. Stanat, B. Lütje-Klose, C. Gresch, H. A. Pant, & M. Prenzel (Hrsg.), Inklusion von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen (S. 181–219). Wiesbaden: Springer VS. https://doi.org/10.1007/978-3-658-06604-8_7.
Gresch, C., Nusser, L., & Kohrt, P. (2020). Zwischen Standardisierung und Anpassung: Administration und Durchführung der Datenerhebung bei Schüler*innen mit sonderpädagogischem Förderbedarf in Large-Scale-Studien. In C. Gresch, P. Kuhl, M. Grosche, C. Sälzer & P. Stanat (Hrsg.), Schüler*innen mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen: Einblicke und Entwicklungen (S. 77–107). Wiesbaden: Springer.
Gresch, C., Strietholt, R., Kanders, M., & Solga, H. (2016). Reading-aloud versus self-administered student questionnaires: An experiment on data quality. In H.-P. Blossfeld, J. von Maurice, M. Bayer, & J. Skopek (Hrsg.), Methodological issues of longitudinal surveys (S. 561–578). Wiesbaden: Springer.
Grünke, M., & Grosche, M. (2014). Lernbehinderung. In G. W. Lauth, M. Grünke, & J. C. Brunstein (Hrsg.), Interventionen bei Lernstörungen (S. 76–89). Göttingen: Hogrefe.
Hahn, I., Schöps, K., Rönnebeck, S., Martensen, M., Hansen, S., Saß, S., et al. (2013). Assessing scientific literacy over the lifespan – A description of the NEPS science framework and the test development. Journal for Educational Research Online, 5(2), 110–138.
Händel, M., Artelt, C., & Weinert, S. (2013). Assessing metacognitive knowledge: Development and evaluation of a test instrument. Journal for Educational Research Online, 5(2), 162–188.
Händel, M., Lockl, K., Heydrich, J., Weinert, S., & Artelt, C. (2014). Assessment of metacognitive knowledge in students with special educational needs. Metacognition and Learning, 9(3), 333–352. https://doi.org/10.1007/s11409-014-9119-x.
Händel, M., Lockl, K., Heydrich, J., Weinert, S., & Artelt, C. (2015). Kompetenztestung bei Schülerinnen und Schülern mit Förderschwerpunkt Lernen. Effekte unterschiedlicher Testbedingungen am Beispiel eines Tests zum metakognitiven Wissen. In P. Kuhl, P. Stanat, B. Lütje-Klose, C. Gresch, H. A. Pant, & M. Prenzel (Hrsg.), Inklusion von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen (S. 221–242). Wiesbaden: Springer.
Hessels, M. G. P. (2009). Estimation of the predictive validity of the HART by means of a dynamic test of geography. Journal of Cognitive Education and Psychology, 8(1), 5–21. https://doi.org/10.1891/1945-8959.8.1.5.
Heydrich, J., Weinert, S., Nusser, L., Artelt, C., & Carstensen, C. H. (2013). Including students with special educational needs into large-scale assessments of competencies: Challenges and approaches within the German National Educational Panel Study (NEPS). Journal for Educational Research Online, 5(2), 217–240.
Kettler, R. J. (2012). Testing Accommodations: Theory and research to inform practice. International Journal of Disability, Development and Education, 59(1), 53–66. https://doi.org/10.1080/1034912X.2012.654952.
Klauer, K. J., & Lauth, G. W. (1997). Lernbehinderungen und Leistungsschwierigkeiten bei Schülern. In F. E. Weinert (Hrsg.), Psychologie des Unterrichts und der Schule (S. 701–738). Göttingen: Hogrefe.
Kocaj, A., Kuhl, P., Kroth, A. J., Pant, H. A., & Stanat, P. (2014). Wo lernen Kinder mit sonderpädagogischem Förderbedarf besser? Ein Vergleich schulischer Kompetenzen zwischen Regel- und Förderschulen in der Primarstufe. Kölner Zeitschrift für Soziologie und Sozialpsychologie, 66(2), 165–191. https://doi.org/10.1007/s11577-014-0253-x.
Kocaj, A., Haag, N., Weirich, S., Kuhl, P., Pant, H. A., & Stanat, P. (2016). Aspekte der Testgüte bei der Erfassung schulischer Kompetenzen von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf. In V. Moser & B. Lütje-Klose (Hrsg.), Zeitschrift für Pädagogik – 62. Beiheft „Schulische Inklusion“ (S. 212–234). Weinheim: Beltz/Juventa.
Koretz, D., & Barton, K. (2004). Assessing students with disabilities: Issues and evidence. Educational Assessment, 9(1–2), 29–60. https://doi.org/10.1080/10627197.2004.9652958.
Kreuter, F., Eckman, S., Maaz, K., & Watermann, R. (2010). Children’s reports of parents’ education level: Does it matter whom you ask and what you ask about. Survey Research Methods, 4, 127–138.
Kristen, C., Edele, A., Kalter, F., Kogan, I., Schulz, B., Stanat, P., & Will, G. (2011). The education of migrants and their children across the life course. Zeitschrift Für Erziehungswissenschaft, 14(S2), 121–137. https://doi.org/10.1007/s11618-011-0194-3.
Lang, F. R., Kamin, S., Rohr, M., Stünkel, C., & Willinger, B. (2014). Erfassung der fluiden kognitiven Leistungsfähigkeit über die Lebensspanne im Rahmen des Nationalen Bildungspanels: Abschlussbericht zu einer NEPS-Ergänzungsstudie (NEPS Working Paper No. 43). Bamberg: Leibniz-Institut für Bildungsverläufe, Nationales Bildungspanel.
Lauth, G. W., Brunstein, J. C., & Grünke, M. (2014). Lernstörungen im Überblick: Arten, Klassifikation, Verbreitung und Erklärungsperspektiven. In G. W. Lauth, M. Grünke, & J. C. Brunstein (Hrsg.), Interventionen bei Lernstörungen: Förderung, Training und Therapie in der Praxis (S. 17–31). Göttingen: Hogrefe.
Looker, E. D. (1989). Accuracy of proxy reports of parental status characteristics. Sociology of Education, 62(4), 257. https://doi.org/10.2307/2112830.
Maaz, K., Kreuter, F., & Watermann, R. (2006). Schüler als Informanten? Die Qualität von Schülerangaben zum sozialen Hintergrund. In J. Baumert, P. Stanat, & R. Waterman (Hrsg.), Herkunftsbedingte Disparitäten im Bildungswesen: Differenzielle Bildungsprozesse und Probleme der Verteilungsgerechtigkeit (S. 31–59). Wiesbaden: Springer.
Mahler, N., Kölm, J., & Werner, B. (2020). Entwicklung von Mathematiktestaufgaben für Schüler*innen mit sonderpädagogischem Förderbedarf Lernen – Konzeption und empirische Ergebnisse. In C. Gresch, P. Kuhl, M. Grosche, C. Sälzer & P. Stanat (Hrsg.), Schüler*innen mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen: Einblicke und Entwicklungen (S. 109–146). Wiesbaden: Springer.
Marsh, H. W. (1986). Negative item bias in ratings scales for preadolescent children: A cognitive-developmental phenomenon. Developmental Psychology, 22(1), 37–49. https://doi.org/10.1037/0012-1649.22.1.37.
Müller, K., Prenzel, M., Sälzer, C., Mang, J., Heine, J.-H., & Gebhardt, M. (2017). Wie schneiden Schülerinnen und Schüler an Förderschulen bei PISA ab? Analysen aus der PISA 2012-Zusatzerhebung zu Jugendlichen mit sonderpädagogischem Förderbedarf. Unterrichtswissenschaft, 45(2), 175–192.
Neumann, I., Duchhardt, C., Grüßing, M., Heinze, A., Knopp, E., & Ehmke, T. (2013). Modeling and assessing mathematical competence over the lifespan. Journal for Educational Research Online, 5(2), 80–109.
Nusser, L. (2018). Valide und vergleichbare Erfassung bildungsrelevanter Konstrukte bei Schülerinnen und Schüler mit einem sonderpädagogischen Förderbedarf Lernen. Bamberg: OPUS (Otto-Friedrich-Universität).
Nusser, L., & Messingschlager, M. (2018). Erfassung kognitiver Grundfähigkeiten bei Schülerinnen und Schülern an Förderschulen in Startkohorte 4 (Klasse 9) (NEPS Survey Paper No. 33). Bamberg: Leibniz-Institut für Bildungsverläufe, Nationales Bildungspanel.
Nusser, L., & Weinert, S. (2017). Instructions in test-taking: An appropriate approach for students with special educational needs. Journal of Cognitive Education and Psychology, 16(3), 227–240. https://doi.org/10.1891/1945-8959.16.3.227.
Nusser, L., Carstensen, C. H., & Artelt, C. (2015). Befragung von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf Lernen: Ergebnisse zur Messinvarianz. Empirische Sonderpädagogik, 7(2), 99–116.
Nusser, L., Heydrich, J., Carstensen, C. H., Artelt, C., & Weinert, S. (2016). Validity of survey data of students with special educational needs – Results from the National Educational Panel Study. In H.-P. Blossfeld, J. von Maurice, M. Bayer, & J. Skopek (Hrsg.), Methodological Issues of Longitudinal Surveys (S. 251–266). Wiesbaden: Springer.
Nusser, L., Weinert, S., Artelt, C., & Carstensen, C. H. (in Vorbereitung). Anlage der Machbarkeitsstudien an Förderschulen Lernen im Rahmen des Nationalen Bildungspanels (2010–2013) (NEPS Survey Paper). Bamberg: Leibniz-Institut für Bildungsverläufe, Nationales Bildungspanel.
Pitoniak, M. J., & Royer, J. M. (2001). Testing accommodations for examinees with disabilities: A review of psychometric, legal, and social policy issues. Review of Educational Research, 71(1), 53–104. https://doi.org/10.3102/00346543071001053.
Pohl, S., & Carstensen, C. H. (2012). NEPS technical report – Scaling the data of the competence tests. https://www.neps-data.de/Portals/0/Working%20Papers/WP_XIV.pdf.
Pohl, S., Südkamp, A., Hardt, K., Carstensen, C. H., & Weinert, S. (2016). Testing students with special educational needs in large-scale assessments – Psychometric properties of test scores and associations with test taking behavior. Frontiers in Psychology, 7. https://doi.org/10.3389/fpsyg.2016.00154.
Roussos, L. A. & Stout, W. (2004). Differential item functioning analysis: Detecting DIF item and testing DIF hypotheses. In D. Kaplan (Hrsg.), The Sage handbook of quantitative methodology for the social sciences (S. 107–115). Thousand Oaks, CA: Sage.
Schnittjer, I., & Duchhardt, C. (2015). Mathematical competence: Framework and exemplary test items. https://www.neps-data.de/Portals/0/NEPS/Datenzentrum/Forschungsdaten/Kompetenzen/com_ma_2015.pdf.
Scruggs, T. E., Bennion, K., & Lifson, S. (1985). An analysis of children’s strategy use on reading achievement tests. The Elementary School Journal, 85(4), 479–484.
Senkbeil, M., Ihme, J. M., & Wittwer, J. (2013). The Test of Technological and Information Literacy (TILT) in the National Educational Panel Study: Development, empirical testing, and evidence for validity. Journal for Educational Research Online, 5(2), 139–161.
Sireci, S. G., Scarpati, S. E., & Li, S. (2005). Test accommodations for students with disabilities: An analysis of the interaction hypothesis. Review of Educational Research, 75(4), 457–490.
Steinmetz, H., Schmidt, P., Tina-Booh, A., Wieczorek, S., & Schwartz, S. H. (2009). Testing measurement invariance using multigroup CFA: Differences between educational groups in human values measurement. Quality & Quantity, 43(4), 599–616. https://doi.org/10.1007/s11135-007-9143-x.
Südkamp, A., Pohl, S., Hardt, K., Jordan, A.-K., & Duchhardt, C. (2015). Kompetenzmessung in den Bereichen Lesen und Mathematik bei Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf. In P. Kuhl, P. Stanat, B. Lütje-Klose, C. Gresch, H. A. Pant, & M. Prenzel (Hrsg.), Inklusion von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen (S. 243–272). Wiesbaden: Springer.
Südkamp, A., Pohl, S., & Weinert, S. (2015). Competence assessment of students with special educational needs – Identification of appropriate testing accommodations. Frontline Learning Research, 3(2), 1–26.
Thurlow, M. L., Ysseldyke, J. E., & Silverstein, B. (1995). Testing accommodations for students with disabilities. Remedial and Special Education, 16(5), 260–270. https://doi.org/10.1177/074193259501600502.
Torgesen, J. K. (1977). The role of nonspecific factors in the task performance of learning disabled children: A theoretical assessment. Journal of Learning Disabilities, 10(1), 33–40.
von Maurice, J., Zinn, S., & Wolter, I. (2017). Large-scale assessments: Potentials and challenges in longitudinal designs. Psychological Test and Assessment Modeling, 59(1), 35–54.
Weinert, S., & Artelt, C. (2019). Measurement of skills and achievement: A critical assessment of theoretical and methodological concepts. In R. Becker (Hrsg.), Research handbook on the sociology of education (S. 106–131). Cheltenham, UK: Edward Elgar Publishing.
Weinert, S., Artelt, C., Prenzel, M., Senkbeil, M., Ehmke, T., & Carstensen, C. H. (2011). Development of competencies across the life span. Zeitschrift Für Erziehungswissenschaft, 14(S2), 67–86. https://doi.org/10.1007/s11618-011-0182-7.
Wong, B. Y. L. (1991). The relevance of metacognition to learning disabilities. In B. Y. L. Wong (Hrsg.), Learning about learning disabilities (S. 231–258). San Diego: Academic.
Zielinski, W. (1996). Lernschwierigkeiten. In F. E. Weinert (Hrsg.), Psychologie des Lernens und der Instruktion (S. 369–402). Göttingen: Hogrefe.
Author information
Authors and Affiliations
Corresponding author
Editor information
Editors and Affiliations
Rights and permissions
Copyright information
© 2020 Springer Fachmedien Wiesbaden GmbH, ein Teil von Springer Nature
About this chapter
Cite this chapter
Nusser, L., Weinert, S., Artelt, C., Carstensen, C.H. (2020). Machbarkeitsstudien an Förderschulen mit dem Schwerpunkt Lernen im Rahmen des Nationalen Bildungspanels (2010 bis 2013) – Ergebnisse und Resümee. In: Gresch, C., Kuhl, P., Grosche, M., Sälzer, C., Stanat, P. (eds) Schüler*innen mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen . Springer VS, Wiesbaden. https://doi.org/10.1007/978-3-658-27608-9_6
Download citation
DOI: https://doi.org/10.1007/978-3-658-27608-9_6
Published:
Publisher Name: Springer VS, Wiesbaden
Print ISBN: 978-3-658-27607-2
Online ISBN: 978-3-658-27608-9
eBook Packages: Social Science and Law (German Language)