Auswirkungen verschiedener Aufsichtsbedingungen auf die Datenqualität bei standardisierten Befragungen im Klassenraum

Autor/innen

DOI:

https://doi.org/10.21241/

Schlagwörter:

Standardisierte Befragungen, Datenqualität, Schule, Item-Nonresponse, Interviewereffekte

Abstract

Standardisierte Befragungen von Jugendlichen stellen besondere Herausforderungen an die Befragungssituation. Diese Studie testet empirisch, ob sich Unterschiede in der Datenqualität zwischen drei Befragungsmodi standardisierter Befragungen mit mittelgroßen Gruppen von Jugendlichen (12–17 Jahre) feststellen lassen. Die Datenbasis bildet eine quasi-experimentelle Befragung, in der verschiedene Formen der digitalen, hybriden oder persönlichen Aufsicht getestet wurden. Die Befragung wurde 2021 an weiterführenden Schulen in Deutschland durchgeführt (n=923). Ziel dieses Beitrages ist es, zu untersuchen, wie sich drei Aspekte der Datenqualität – Item-Nonresponse, Interviewdauer und Antwortmuster – zwischen Aufsichtsmodi unterscheiden. Es zeigen sich signifikante Unterschiede in Item-Nonresponse, der Interviewdauer und den Antwortmustern. Die aus den Ergebnissen gezogenen Schlussfolgerungen stellen den gängigen Ansatz in Frage, sich bei der Durchführung von Befragungen ausschließlich auf Lehrkräfte zu verlassen, ohne die Unterstützung externer Aufsichtspersonen oder eine angemessene Schulung. Die Rekrutierung von Befragten über Schulen und die Online-Befragung zu Hause während der Schulzeit haben sich im Hinblick auf die analysierten Indikatoren als robuste Methode erwiesen.

References

Alibali, M. W., und M. J. Nathan. 2010. Conducting Research in Schools: A Practical Guide. Journal of Cognition and Development 11(4):397–407.

Atkeson, L. R., A. N. Adams, und M. Alvarez. 2014. Nonresponse and Mode Effects in Self- and Interviewer-Administered Surveys. Political Analysis 22(3):304–320.

Bartlett, R., T. Wright, T. Olarinde, T. Holmes, E. R. Beamon und D. Wallace. 2017. Schools as Sites for Recruiting Participants and Implementing Research. Journal of Community Health Nursing 34(2):80–88.

Bidonde, J., J. F. Meneses-Echavez, E. Hafstad, G. S. Brunborg und L. Bang. 2023. Methods, Strategies, and Incentives to Increase Response to Mental Health Surveys Among Adolescents: A Systematic Review. BMC Medical Research Methodology 23(1):270.

Brown, B., und J. Larson. 2009. Peer Relationships in Adolescence. In: Handbook of Adolescent Psychology, Hrsg. R. Lerner und L. Steinberg, 74–103. Hoboken, NJ: Wiley.

Cops, D., A. De Boeck und S. Pleysier. 2016. School vs. Mail Surveys: Disentangling Selection and Measurement Effects in Self-reported Juvenile Delinquency. European Journal of Criminology 13:92–110.

Demkowicz, O., E. Ashworth, R. Mansfield, E. Stapley, H. Miles, D. Hayes, D. Burrell, A. Moore und J. Deighton. 2020. Children and Young People’s Experiences of Completing Mental Health and Wellbeing Measures for Research: Learning from Two School-Based Pilot Projects. Child and Adolescent Psychiatry and Mental Health 14:1–18.

Duncan, G. J., und K. Magnuson. 2012. Socioeconomic Status and Cognitive Functioning: Moving from Correlation to Causation. Wiley Interdisciplinary Reviews: Cognitive Science 3(3):377–386.

Ellonen, N., T. Pösö, L. Mielityinen und E. Paavilainen. 2023. Using Self‐Report Surveys in Schools to Study Violence in Alternative Care: A Methodological Approach. Child Abuse Review e2814.

Epstein, D. 1998. “Are you a girl or are you a teacher?” The ‘Least Adult’ Role in Research about Gender and Sexuality in a Primary School. In: Doing Research About Education, Hrsg. G. Walford. London: Falmer Press.

Felderer, B., A. Kirchner und F. Kreuter. 2019. The Effect of Survey Mode on Data Quality: Disentangling Nonresponse and Measurement Error Bias. Journal of Official Statistics 35(1):93–115. doi:10.2478/JOS-2019-0005

Gummer, T., und J. Roßmann. 2015. Explaining Interview Duration in Web Surveys: A Multilevel Approach. Social Science Computer Review 33(2):217–234.

Kivivuori, J., V. Salmi und S. Walser. 2013. Supervision Mode Effects in Computerized Delinquency Surveys at School: Finnish Replication of a Swiss Experiment. Journal of Experimental Criminology 9:91–107.

Leiner, D. J. 2019. Too Fast, too Straight, too Weird: Non-Reactive Indicators for Meaningless Data in Internet Surveys. Survey Research Methods 13(3):229–248.

Little, R. J. 1988. A Test of Missing Completely at Random for Multivariate Data with Missing Values. Journal of the American Statistical Association 83(404):1198–1202.

Little, R. J. 1992. Regression with Missing X's: A Review. Journal of the American Statistical Association 87(420):1227–1237.

Lucia, S., L. Herrmann, und M. Killias. 2007. How important are interview methods and questionnaire designs in research on self-reported juvenile delinquency? An experimental comparison of Internet vs paper-and-pencil questionnaires and different definitions of the reference period. Journal of Experimental Criminology 3:39–64.

March, A., E. Ashworth, C. Mason, J. Santos, R. Mansfield, E. Stapley, J. Deighton, N. Humphrey, N. Tait und D. Hayes. 2022. ‘Shall We Send a Panda?’ A Practical Guide to Engaging Schools in Research: Learning from Large-Scale Mental Health Intervention Trials. International Journal of Environmental Research and Public Health 19(6):3367.

Möhring, W., und D. Schlütz. 2019. Das Interview als soziale Situation. In: Die Befragung in der Medien- und Kommunikationswissenschaft, Hrsg. W. Möhring und D. Schlütz. 41–67. Wiesbaden: Springer VS,.

Mühlböck, M., N. Steiber und B. Kittel. 2017. Less Supervision, More Satisficing? Comparing Completely Self-Administered Web-Surveys and Interviews Under Controlled Conditions. Statistics, Politics, and Policy 8:13–28.

Rasberry, C. N., I. Rose, E. Kroupa, A. Hebert, A. Geller, E. Morris und C. A. Lesesne. 2018. Overcoming Challenges in School-wide Survey Administration. Health Promotion Practice 19(1):110–118.

Revilla, M., und C. Ochoa. 2015. What are the Links in a Web Survey among Response Time, Quality, and Auto-evaluation of the Efforts done? Social Science Computer Review 33(1):97–114.

Stefes, T. 2023. Umwelt, Wohlbefinden und Entwicklung von Kindern und Jugendlichen (UWE) Befragung 2021. GESIS, Köln. Datenfile Version 1.0.0. https://doi.org/10.7802/2613

Stefes, T. 2024. Data Quality of Different Modes of Supervision in Classroom Surveys. Education Sciences, 14(3), 299.

Stefes, T., A. Lemke, V. Gaffron, K. Knüttel, J. Schuchardt, und S. Petermann. 2023. Konzeption und Durchführung der UWE-Befragung 2021. ZEFIR Materialien Band 22. Bochum: Zentrum für interdisziplinäre Regionalforschung (ZEFIR).

Strange, V., S. Forest, A. Oakley und Ripple Study Team. 2003. Using Research Questionnaires with Young People in Schools: The Influence of the Social Context. International Journal of Social Research Methodology 6(4):337–346.

Tourangeau, R., M. P. Couper und F. G. Conrad. 2013. The Science of Web Surveys. Oxford: Oxford University Press.

Walser, S., und M. Killias. 2012. Who Should Supervise Students During Self-report Interviews? A Controlled Experiment on Response Behavior in Online Questionnaires. Journal of Experimental Criminology 8(1):17–28.

Downloads

Veröffentlicht

07.10.2026

Ausgabe

Rubrik

Sektion Methoden der empirischen Sozialforschung: Themen der empirischen Sozialforschung (Sek25)

Ähnliche Artikel

Sie können auch eine erweiterte Ähnlichkeitssuche starten für diesen Artikel nutzen.