Improving Achievement in Secondary Schools: Impact of a Literacy Project on Reading Comprehension and Secondary School Qualifications
Abstract
enThis paper examines whether a literacy intervention involving generic and content area literacy components can improve both achievement on a standardized reading test and the attainment of secondary school qualifications, and whether the intervention can be implemented by teachers in their regular classroom settings. We report on a design‐based approach for whole‐school improvement, the Learning Schools Model (LSM), which was implemented in seven schools with low secondary school qualification rates. The LSM's core premises are that instructional practices need to be developed from evidence about teaching and learning in specific contexts and that professional learning communities need to fine‐tune their instructional practices through collaborative analysis of data. The study employed a quasi‐experimental design within a design‐based approach and included classroom observations and teacher and student surveys. Reading achievement postintervention was statistically significantly higher than the projected achievement levels had the intervention not occurred. Effect sizes for tracked cohorts were Cohen's d = 0.50 and 0.62. The hierarchical linear model of reading achievement, which included students' attitudes toward reading, accounted for about 95% of the total variance. The attainment of secondary school qualifications (measured by odds ratios) increased significantly compared with school attainment prior to the intervention. The rates of attaining these qualifications were faster than national rates. The results suggest that both generic and content area literacy instruction are required and that a strong foundation in generic literacy should be maintained. However, the appropriate blend of literacy instruction is determined by a profiling of teaching and learning needs.
Chinese
zh本文旨在考查一项包含一般性及学科领域的读写干预教学,是否能够帮助学生提高标准化阅读测验的成绩及取得中学毕业证书资格的成绩,同时亦考查该项干预教学能否由教师在其日常教学环境中实施。本文作者报告,这项为求改善整个学校而使用基于调查设计研究方法的干预教学(学习学校模型)在七所中学毕业证书资格合格率低的学校里施行。学习学校模型的核心前提是:教学实践需要根据有关特定教学环境的学习成绩证据而发展出来,而专业学习社区需要通过协作式分析学习成绩资料来微调其教学实践。本研究使用基于调查设计内的准实验设计研究方法,并包括课堂观察及对教师和学生的调查。干预教学阶段后的阅读成绩,统计上显著地高于假设没有干预教学所预期的成绩水平。追踪研究实验群组的效应值为0.50和0.62。阅读成绩的阶层线性模型统计分析,其中包括学生对阅读之态度,可解释约占总方差的95%。与干预教学阶段前相比,干预教学阶段后的中学毕业证书资格成绩(用比值比来衡量)有显著的提高,达到这些资格的进度比全国的进度更快。这些结果显示,一般性和学科领域的读写教学都是有需要的,稳健的一般性读写能力基础是有需要保持的。然而,适当的混合式读写教学,是根据教学与学习需要的分析证据而决定的。
Spanish
esEste estudio investiga si una intervención de competencias que incluye componentes genéricos y de contenido puede mejorar tanto el éxito en un examen estándar de lectura como conseguir las cualificaciones para la escuela secundaria, y si la intervención puede ser implementada por maestros en sus clases regulares. Les informamos sobre un acercamiento diseñado para el mejoramiento de la escuela completa, el Modelo de Escuelas Aprendices (LSM por sus siglas en inglés), que fue implementado en siete escuelas con tasas bajas de cualificación a la escuela secundaria. Las proposiciones claves del LSM son que las prácticas de enseñanza tienen que surgir de evidencia sobre los contextos específicos de enseñanza y aprendizaje, y que las comunidades profesionales del aprendizaje tienen que afinar sus prácticas de enseñanza por medio del análisis colaborativo de la información. El estudio usó un diseño casi experimental dentro de un acercamiento basado en el diseño e incluyó observaciones en los salones de clase y encuestas de los maestros y los estudiantes. Los logros en la lectura después de la intervención resultaron ser significantemente más altos estadísticamente que los resultados proyectados si no hubiese habido la intervención. Los tamaños de los efectos de los cohortes que se observaron fueron d = 0.50 y 0.62 de Cohen. El modelo lineal jerárquico de éxito lector que incluye la actitud de los estudiantes a la lectura constituyó casi el 95% de la variación total. El conseguir las cualificaciones para la escuela secundaria (medido por razón de probabilidades) aumentó significantemente comparado con lo que se lograba antes de la intervención. Las tasas de lograr estas cualificaciones fueron más rápidas que las tasas nacionales. Los resultados sugieren que se necesitan tanto la instrucción de competencias genéricas como la de contenido, y que una base fuerte en competencias genéricas debe ser mantenida. Sin embargo, la mezcla apropiada de instrucción de competencias se determina por medio de la creación de un cuadro de las necesidades de enseñanza y de aprendizaje.
Arabic
arتفحص هذه الورقة قدرة تدخُّل تعلُّميّ يشمل مكوّنات مجال المحتوى والمجال العمومي على تحسين الإنجاز في امتحان قراءة قياسي وكذلك تحسين مؤهلات مدرسة ثانوية ونسأل إذا استطاع الأساتذة تنفيذ التدخل في صفوفهم العادية. لقد أفدنا بمدخل مبني على التصميم لتحسين المدرسة بإكمالها يسمّى نموذج المدارس التعلمية الذي تم تنفيذه في سبع مدارس ذات مستويات مؤهلات منخفضة. وعليه فمبادئ نموذج المدارس التعلمية تقوم على أن لابد من تطوير ممارسات تعليمية على أساس براهين التعلم والتعليم في سياقات معينة وأن مجتمعات التعلم المهني لابد لها من تضبيط ممارساتها التعليمية بواسطة تحاليل مشتركة للمعطيات. وقد استخدمت هذه الدراسة تصميم شبه اختباري من ضمن مدخل مبني على التصميم وشملت ملاحظات الصف واستفتاءات الأساتذة والطلاب. وجدير بالذكر أن إنجاز القراءة ما بعد التدخل كان أعلى إحصائياً من مستويات الإنجاز المتوقعة في حالة لم يتم التدخل. لقد بلغت أحجام تأثير المجموعات تحت المراقبة على مقياس كوهن الفرق = 0.50 و0.62 وقد بلغ نموذج إنجاز القراءة الخطي الهرمي الذي تضمنت عواطف الطلاب تجاه القراءة، إلى ما يعادل 95% من المتغير الشمولي. إن إنجاز مؤهلات مدارس ثانوية (تنقاس عن طريق نسب الأرجحية) ازداد ازدياداً كبيراً بالمقارنة مع إنجاز المدرسة قبل التدخل. في حقيقة الأمر نسب إنجاز هذه المؤهلات تجاوزت سرعة النسب الوطنية. تشير النتائج إلى أن كلاً من المجال العمومي ومجال المحتوى في تعليم القراءة والكتابة ضروريان وأن أساساً قوياً في مجال التعلم العمومي ينبغي صيانته. غير أن الخليط المناسب لتعليم القراءة والكتابة يتحدد من خلال حصر حاجات التعليم والتعلم على حد سواء.
Russian
ruMoжeт ли вмeшaтeльcтвo, coчeтaющee в ceбe кoмпoнeнты oбщeй и пpeдмeтнoй гpaмoтнocти, yлyчшить peзyльтaты тecтa пo чтeнию и, в цeлoм, peзyльтaты oбyчeния в cpeднeй шкoлe? Cпocoбeн ли yчитeль ocyщecтвлять тaкoe вмeшaтeльcтвo нa oбычныx ypoкax? B cтaтьe oтpaжeны итoги пpoeктa пo цeлocтнoмy coвepшeнcтвoвaнию шкoлы, т.н. Learning Schools Model (LSM), кoтopый был пpeдпpинят в ceми cpeдниx шкoлax c низкими итoгoвыми пoкaзaтeлями. Ocнoвнoй пocыл пpoeктa LSM cocтoит в тoм, чтo мeтoды oбyчeния cлeдyeт paзpaбaтывaть нa ocнoвe и для кoнкpeтнoгo кoнтeкcтa и пpoфeccиoнaльныe yчитeльcкиe cooбщecтвa дoлжны пocтoяннo нacтpaивaть и пepeнacтpaивaть cвoи инcтpyмeнты нa ocнoвe coвмecтнoгo aнaлизa дaнныx. B иccлeдoвaнии иcпoльзoвaн квaзиэкcпepимeнтaльный пoдxoд и тaкиe мeтoды, кaк нaблюдeниe нa ypoкax и aнкeтиpoвaниe yчитeлeй и yчaщиxcя. Peзyльтaты в чтeнии пocлe вмeшaтeльcтвa oкaзaлиcь cтaтиcтичecки знaчимo вышe, чeм peзyльтaты, пpeдcкaзaнныe бeз yчeтa вмeшaтeльcтвa. Beличинa эффeктa для oтcлeжeнныx кoгopт пo Дж.Кoэнy (d) = 0.50 и 0.62. Иepapxичecкaя линeйнaя мoдeль ycпexoв в чтeнии, кoтopaя включaлa и oтнoшeниe yчaщиxcя к чтeнию, oтpaжaeт пpиблизитeльнo 95% вceгo paзбpoca. Уcпexи пo cpeднeй шкoлe в цeлoм (измepялиcь мeтoдoм cooтнoшeния шaнcoв) знaчитeльнo yвeличилocь пo cpaвнeнию c cитyaциeй дo вмeшaтeльcтвa. Teмпы дocтижeния этиx ycпexoв были вышe, чeм в цeлoм пo cтpaнe. Peзyльтaты иccлeдoвaния cвидeтeльcтвyют o тoм, чтo для пoвышeния кaк oбщeй, тaк и пpeдмeтнoй гpaмoтнocти нeoбxoдимo вмeшaтeльcтвo, и нeoбxoдимo пoддepживaть и paзвивaть бaзoвyю гpaмoтнocть. Oднaкo инcтpyмeнтapий для paзвития гpaмoтнocти в кaждoм cлyчae oпpeдeляeтcя пpeдмeтoм и yчeбными пoтpeбнocтями.
French
frCe texte examine la question de savoir si une intervention de littératie comportant des aspects génériques et des aspects avec un contenu propre à un domaine particulier permet d'améliorer à la fois les résultats à un test standard de lecture et d'obtenir un diplôme de fin d'études secondaires, et si cette intervention peut être réalisée par des enseignants dans une situation scolaire ordinaire. Il s'agit d'un plan de recherche visant l'école entière, le Learning Schools Model (LSM), qui a été mis en place dans sept écoles présentant de faibles taux d'obtention du diplôme final. Les prémisses de base du LSM sont que les pratiques pédagogiques doivent être développées à partir d'un enseignement et d'un apprentissage ayant un contexte spécifique et que les communautés d'apprentissage professionnel doivent affiner leurs pratiques pédagogiques en recourant à une analyse coopérative des données. La recherche a utilisé un plan quasi‐expérimental au sein d'une méthode fondée sur un plan de sondage et comportait des observations de classe et des questionnaires pour les élèves. Les résultats en lecture après l'intervention ont été statistiquement plus élevés que le niveau attendu si l'intervention n'avait pas eu lieu. La taille des effets pour le d de Cohen pour les cohortes étudiées est de 0.50 et 0.62. Le modèle hiérarchique linéaire de réussite en lecture, qui inclut les attitudes des élèves envers la lecture, rend compte d'environ 95% de la variance totale. La réussite aux diplômes de fin d'études secondaires (mesurée par des rapports de probabilité) ont augmenté significativement par rapport aux taux avant l'intervention. Les taux de réussite à ces diplômes ont été plus rapides que les pourcentages nationaux. Ces résultats permettent de penser qu'il est nécessaire d'effectuer un enseignement générique aussi bien qu'un enseignement propre à un domaine particulier et qu'il faut conserver de solides bases en littératie. Toutefois mélanger comme il convient les enseignements de littératie demande un profilage des besoins d'enseignement et d'apprentissage.
Number of times cited: 16
- Aaron Wilson and Mei Kuin Lai, Leading Literacy Change Through Collaborative Analysis of Practice, Journal of Adolescent & Adult Literacy, 62, 4, (455-458), (2018).
- Shivaun O’Brien, Gerry McNamara, Joe O’Hara and Martin Brown, Irish teachers, starting on a journey of data use for school self-evaluation, Studies in Educational Evaluation, 10.1016/j.stueduc.2018.11.001, 60, (1-13), (2019).
- Douglas Fisher and Nancy Frey, Developing Oral Language Skills in Middle School English Learners, Reading & Writing Quarterly, 34, 1, (29), (2018).
- Wilma B. Kippers, Cindy L. Poortman, Kim Schildkamp and Adrie J. Visscher, Data literacy: What do educators learn and struggle with during a data use intervention?, Studies in Educational Evaluation, 56, (21), (2018).
- Kim Schildkamp and Cindy Louise Poortman, Leadership to Support and Sustain Data Use in Data Teams, Data Leadership for K-12 Schools in a Time of Accountability, 10.4018/978-1-5225-3188-3.ch006, (98-118)
- Jeffrey C. Wayman, Shana Shaw and Vincent Cho, Longitudinal Effects of Teacher Use of a Computer Data System on Student Achievement, AERA Open, 3, 1, (233285841668553), (2017).
- Kim Schildkamp, Maaike Smit and Ulf Blossing, Professional Development in the Use of Data: From Data to Knowledge in Data Teams, Scandinavian Journal of Educational Research, (1), (2017).
- Chris Brown, Kim Schildkamp and Mireille D. Hubers, Combining the best of two worlds: a conceptual proposal for evidence-informed school improvement, Educational Research, 59, 2, (154), (2017).
- Clarence Ng and Brendan Bartlett, Improving Reading and Reading Engagement: An International Focus, Improving Reading and Reading Engagement in the 21st Century, 10.1007/978-981-10-4331-4_1, (3-16), (2017).
- M.K. Lai and S. McNaughton, The impact of data use professional development on student achievement, Teaching and Teacher Education, 60, (434), (2016).
- Judith Dunkerly-Bean and Thomas William Bean, Missing the Savoir for the Connaissance, Journal of Literacy Research, 48, 4, (448), (2016).
- Léonard P. Rivard and Ndeye R. Gueye, Enhancing literacy practices in science classrooms through a professional development program for Canadian minority-language teachers, International Journal of Science Education, 38, 7, (1150), (2016).
- Johanna Ebbeler, Cindy L. Poortman, Kim Schildkamp and Jules M. Pieters, Effects of a data use intervention on educators’ use of knowledge and skills, Studies in Educational Evaluation, 48, (19), (2016).
- Erik Bolhuis, Kim Schildkamp and Joke Voogt, Data-based decision making in teams: enablers and barriers, Educational Research and Evaluation, 22, 3-4, (213), (2016).
- Inge Hoogland, Kim Schildkamp, Fabienne van der Kleij, Maaike Heitink, Wilma Kippers, Bernard Veldkamp and Anne M. Dijkstra, Prerequisites for data-based decision making in the classroom: Research evidence and practical illustrations, Teaching and Teacher Education, 60, (377), (2016).
- Kristin Vanlommel and Kim Schildkamp, How Do Teachers Make Sense of Data in the Context of High-Stakes Decision Making?, American Educational Research Journal, 10.3102/0002831218803891, (000283121880389), (2018).




