Original Article

The School Age Gender Gap in Reading Achievement: Examining the Influences of Item Format and Intrinsic Reading Motivation

Franziska Schwabe

Institute for School Development Research (IFS), TU Dortmund University, , Germany

Search for more papers by this author
Nele McElvany

Institute for School Development Research (IFS), TU Dortmund University, , Germany

Search for more papers by this author
Matthias Trendtel

Federal Institute for Education Research, Innovation and Development of the Austrian School System, , Salzburg

Search for more papers by this author
First published: 05 January 2015
Cited by: 11

Abstract

en

The importance of reading competence for both individuals and society underlines the strong need to understand the gender gap in reading achievement. Beyond mean differences in reading comprehension, research has indicated that girls possess specific advantages on constructed‐response items compared with boys of the same reading ability. Moreover, it was shown that differences in intrinsic motivation in the tested domain might affect test scores. Differential item functioning was used to analyze the complex relationships among gender, item format, and intrinsic reading motivation in two samples taken from large‐scale German assessments of reading comprehension (PIRLS 2011 and PISA 2009). In line with prior research, results showed that compared with equally skilled boys, both 10‐ and 15‐year‐old girls performed better on constructed‐response items. Furthermore, findings suggest an advantage of 15‐year‐old but not 10‐year‐old students with high levels of intrinsic reading motivation when responding to constructed‐response items. Results are discussed in relation to the design and interpretation of (large‐scale) assessments, the increasing use of constructed‐response items in new assessments in response to the Common Core State Standards, and gender‐sensitive educational practice.

Chinese

zh

阅读能力对个人和社会的重要性,突显出要了解阅读成绩两性差距的强烈需要。研究表明,除了阅读理解成绩的平均差异外,女孩在回答建構反應題方面,与同等阅读能力的男孩相比,具有特别的优势。此外,研究亦显示,内在动机的差异在测验范畴中,可能会影响测验分数。本研究使用项目功能差异方法,考查从德国大规模阅读理解能力测验(《2011年全球學生閱讀能力進展研究》和《2009年国际学生能力评估计划》)中取得的两个样本,并分析其中性别、试题项目格式和内在阅读动机之间的复杂关系。分析结果與先前研究结果相一致,显示出10岁和15岁的女孩,在回答建構反應題方面,成绩表现都优胜于同等阅读熟练的男孩。此外,本研究结果亦显示出,内在阅读动机水平高的学生在回答建構反應題方面,是15岁而不是10岁的学生较占优势。本文就(大规模)测验的设计与解读,用以应对德国共同核心州立标准的新评估中越来越多使用的建構反應題,以及对性别敏感的教育实践这三方面来讨论本研究的结果。

Spanish

es

La importancia de la competencia lectora tanto para el individuo como para la sociedad señala la gran necesidad de entender la brecha entre géneros en cuanto al rendimiento de lectura. Más allá de la desviación media en la comprensión lectora, la investigación ha indicado que, comparadas con muchachos con la misma habilidad lectora, las muchachas tienen ventajas específicas en las secciones de respuestas construidas. Es más, se mostró que las diferencias en la motivación intrínseca en el campo examinado podría afectar la nota en los exámenes. Se usó el funcionamiento diferencial de ítemes para analizar la relación compleja entre los géneros, el formato de las secciones, y la motivación lectora intrínseca en dos muestras tomadas de evaluaciones a gran escala de la comprensión lectora (PIRLS 2011 y PISA 2009). Al igual que en investigaciones anteriores, los resultados mostraron que, comparadas con muchachos de la misma habilidad, tanto las muchachas de 10 como las de 15 años salieron mejor en las secciones de respuestas construidas. Además, los resultados sugieren una ventaja en las de 15 pero no en las de 10 años con altos niveles de motivación lectora intrínseca al responder a las secciones de respuestas construidas. Se discuten los resultados en relación al diseño y la interpretación de evaluaciones (a gran escala), el creciente uso de secciones de respuestas construidas en nuevos exámenes respondiendo a los estándares estatales de asignaturas comunes (Common Core State Standards), y las prácticas educacionales que toman en cuenta el género.

Arabic

ar

إن أهمية كفاءة القراءة للأفراد والمجتمع على حد سواء تؤكد الحاجة الماسة لفهم ثغرة الجنس في إنجاز القراءة. وما وراء الاختلافات المعدلة، لقد أشارت الأبحاث إلى أن البناب يتمتعن بمزايا معينة فيما يتعلق بأجوبة إنشائية مقارنة بالأولاد الذين يتمتعون بعين القدرة القرائية. وعلاوة على ذلك، تم تسليط الضوء على الاختلافات في الدافع الفطري في مجال الامتحان التي قد تؤثر بعلامة الامتحان. وقد تم استخدام توظيف السؤال التبايني لتحليل العلاقات المعقدة بين الجنسين ونظام الأسئلة ودافع القراءة الفطري في عينتين مأخوذتين من امتحانات اللغة الألمانية الواسعة النطاق في استيعاب القراءة (بيرلز 2011 وبيسا2009). وتتوافق هذه النتائج مع أبحاث سابقة التي أظهرت أن البنات الللاتي أعمارهن بين 10‐15 سنة تفوقن على نظراءهن الأولاد فيما يخص أجوبة إنشائية. فضلاً عن ذلك، تشير النتائج إلى وجود ميزة لدى الطلاب الذين عمرهم 15 سنة ودافع قرائتهم الفطري عالي جداً فيما يتعلق بأجوبتهم في أسئلة إنشائية وهذا يختلف كل الاختلاف عن الطلاب الذين عمرهم 10 سنوات. وقد تم نقاش النتائج بصدد تصميم امتحانات واسعة النطاق وترجمتها والتزايد في استخدام أجوبة إنشائية في امتحانات جديدة في رد على معايير جوهرية مشتركة بين الولايات وممارسة تعليمية حساسة الجنس.

Russian

ru

Чeлoвeк дoлжeн yмeть читaть – этo вaжнo кaк для нeгo caмoгo, тaк и для oбщecтвa в цeлoм, пoэтoмy нeoбxoдимo paзoбpaтьcя в пpичинax гeндepнoгo paзpывa, нaблюдaeмoгo пpи oбpeтeнии нaвыкoв чтeния. Пoмимo cтaтиcтичecкиx paзличий в пoнимaнии пpoчитaннoгo, иccлeдoвaтeли oбнapyжили, чтo дeвoчкaм лeгчe выбиpaть из мнoжecтвa зapaнee cфopмyлиpoвaнныx oтвeтoв, чeм мaльчикaм c тaкими жe cпocoбнocтями к чтeнию. Бoлee тoгo, выяcнилocь, чтo paзличия нa ypoвнe внyтpeннeй мoтивaции, cвязaнныe c тecтиpyeмoй тeмoй или тeкcтoм, мoгyт пoвлиять нa peзyльтaт тecтиpoвaния. Для aнaлизa cлoжныx oтнoшeний мeждy гeндepнoй пpинaдлeжнocтью, фopмaтoм тecтa и внyтpeннeй мoтивaциeй paccмaтpивaлиcь двe выбopки из кpyпнoмacштaбныx пpoeктoв пo oцeнкe пoнимaния пpoчитaннoгo (PIRLS 2011 и PISA 2009 для Гepмaнии). B итoгe пoдтвepдилocь тo, чтo явcтвoвaлo из пpeдшecтвyющиx иccлeдoвaний: 10‐и 15‐лeтниe дeвoчки лyчшe cпpaвляютcя c выбopoм из мнoжecтвa гoтoвыx oтвeтoв, чeм мaльчики тoгo жe вoзpacтa и ypoвня читaтeльcкиx нaвыкoв. Кpoмe тoгo, выявлeнo, чтo 15‐лeтниe (нo нe 10‐лeтниe) шкoльники c выcoкoй внyтpeннeй мoтивaциeй дeмoнcтpиpyют в пoдoбнoм тecтиpoвaнии бoлee выcoкиe peзyльтaты. Пoлyчeнныe вывoды вaжны для плaниpoвaния кpyпнoмacштaбныx oцeнoчныx пpoeктoв и для интepпpeтaции иx peзyльтaтoв, пocкoлькy из‐зa тpeбoвaний Oбщeгocyдapcтвeнныx cтaндapтoв вce бoльшe тecтoв cтpoятcя нa выбope гoтoвыx oтвeтoв. Пoлyчeнныe вывoды нeoбxoдимo yчитывaть и в гeндepнo‐opиeнтиpoвaнныx oбpaзoвaтeльныx пpaктикax.

French

fr

L'importance de la lecture pour les individus et pour la société justifie le besoin qu'il y a de comprendre les differences entre les garçons et les filles dans la comprehension de la lecture. Au‐delà des differences en comprehension, les recherches montrent que les filles réussisent mieux que les garçons quand les items demandent de rédiger la réponse. On a montré également que des differences dans la motivation spécifique pour le domaine testé peut avoir un effet sur les résultats obtenus. Nous avons utilisé le fonctionnement différentiel des items pour analyser les relations complexes entre le genre, le format de l'item, et la motivation spécifique avec deux échantillons pris dans des évaluations allemandes à large échelle de compréhension de la lecture (PIRLS 2011 et PISA 2009). Comme dans les recherches antérieures, les résultats ont montré que, comparées avec des des garçons de niveau equivalent, les filles de 10 et 15 ans réussissent mieux dans les items qui demandent de rédiger la réponse. De plus, les résultats suggèrent un avantage pour les filles de 15 ans mais non de 10 ans ayant un haut niveau de motivation spécifique dans les items demandant de rédiger la réponse. Nous discutons de ces résultats en relation avec le dispositif et l'interprétation des évaluations à grande échelle, et avec l'utilisation croissante des items qui demandent de rédiger la réponse dans les nouvelles évaluations concernant les Socles de normes communes officiels, et les pratiques pédagogiques realtives au genre.

Number of times cited: 11

  • , Can test construction account for varying gender differences in international reading achievement tests of children, adolescents and young adults? – A study based on Nordic results in PIRLS, PISA and PIAAC, Assessment in Education: Principles, Policy & Practice, 25, 1, (107), (2018).
  • , Die Effektivität schriftlicher und kombiniert auditiv-schriftlicher Wortschatzfördermaßnahmen bei Kindern mit nichtdeutscher HerkunftsspracheThe efficacy of vocabulary promotion in students with a non-German first language – a comparison of written and combined auditory-written formats, Zeitschrift für Erziehungswissenschaft, 10.1007/s11618-018-0815-1, 21, 5, (951-971), (2018).
  • , The High Cost of “Girl Books” for Young Adolescent Boys, The Reading Teacher, 70, 5, (583-593), (2017).
  • , The Effects of Item Format and Cognitive Domain on Students’ Science Performance in TIMSS 2011, Research in Science Education, (2017).
  • , Engaging Students in the “Joy of Reading” Programme in Finland, Improving Reading and Reading Engagement in the 21st Century, 10.1007/978-981-10-4331-4_7, (143-165), (2017).
  • , Girls, boys and early reading: parents’ gendered views about literacy and children's attitudes towards reading, Early Child Development and Care, 186, 5, (703), (2016).
  • , Video gaming and gender differences in digital and printed reading performance among 15-year-olds students in 26 countries, Journal of Adolescence, 48, (45), (2016).
  • , Assessing the previous economic knowledge of beginning students in Germany: Implications for teaching economics in basic courses, Citizenship, Social and Economics Education, 15, 1, (45), (2016).
  • , Conductas, estrategias y rendimiento en Lectura en Pisa: análisis para el Perú, REICE. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educación, 14.3, 2016, (2016).
  • , Reading skills of students in different school tracks: Systematic (dis)advantages based on item formats in large scale assessments, Zeitschrift für Erziehungswissenschaft, 18, 4, (781), (2015).
  • , Unattended consequences: how text responses alter alongside PISA’s mode change from 2012 to 2015, Education Inquiry, 10.1080/20004508.2018.1518080, (1-22), (2018).