Interferência da habilidade de escrita no resultado do teste de Cloze por razão fixa Impact of writing skills on the fixed-ratio Cloze test scores

Interferência da habilidade de escrita no resultado do teste de Cloze por razão fixa Impact of writing skills on the fixed-ratio Cloze test scores

Main Article Content

Adriana Satico Ferraz
Neide de Brito Cunha
Acácia Aparecida Angeli Santos
Abstract

The Cloze test assesses students' reading comprehension. Studies indicate that fixed-ratio Cloze's test scores are related to writing, suggesting that this assessment format depends on this linguistic ability. Thus, this research aimed to investigate the interference of errors in writing for the performance in the fixed-ratio Cloze test. Participated in this study, 1.842 students from the five Brazilian regions, enrolled in public schools of Elementary School I (3rd to 5th year). The instruments used were the Cloze tests "The Princess and the Ghost" and "An unfortunate Revenge," and the Writing Assessment Scale. As a result, structural equation modeling indicated that the writing ability represented more than 60% of the explained variance of the Cloze tests. Students who had a higher number of errors in writing had lower results in Cloze. The number of errors in writing predicted the performance in the Cloze test, together with the variable school year. Both Cloze tests presented adequate estimates of reliability. The results corroborate previous studies. Indications for further studies are made, as well as suggestions for using the fixed-ratio Cloze test.

Downloads

Download data is not yet available.

Publication Facts

Metric
This article
Other articles
Peer reviewers 
3
2.4

Reviewer profiles  N/A

Author statements

Author statements
This article
Other articles
Data availability 
N/A
16%
External funding 
No
32%
Competing interests 
N/A
11%
Metric
This journal
Other journals
Articles accepted 
64%
33%
Days to publication 
231
145

Indexed in

Editor & editorial board
profiles
Publisher 
Bogotá: Corporación Universitaria Iberoamericana

Article Details

Author Biographies / See

Neide de Brito Cunha, Centro Paula Souza - Unidade de Pós-graduação, Extensão e Pesquisa

Doctora en Psicología en el área educativa, Maestría en Educación. Profesor de la Maestría Profesional en Gestión y Desarrollo de la Formación Profesional. Con intereses la formación del formador y la autorregulación del aprendizaje.

Acácia Aparecida Angeli Santos, Universidade São Francisco, Campinas - SP, Brasil

Psicóloga, Doctora en Psicología. Docente e investigadora con con experiencia en cursos de pregrado y posgrado stricto-sensu. 1A Research Fellow por CNPq.
References

Abraham, R. G., & Chapelle, C. A. (1992). The meaning of Cloze test scores: An item difficulty perspective. The Modern Language Journal, 76(4), 468-479. https://doi.org/10.2307/330047 DOI: https://doi.org/10.1111/j.1540-4781.1992.tb05394.x

Apsari, Y. (2016). Cloze passage in improving students’reading comprehension. Eltin Journal, Journal Of English Language Teaching In Indonesia, 4(2), 53-62. Recuperado de http://e-journal.stkipsiliwangi.ac.id/index.php/eltin/article/view/379

Arshad, A., Shakir, A., & Ahmad, M. (2020). A Review on the Principles of a Reading Comprehension Test Construction to assess the Test Takers at different levels. Hamdard Islamicus, 43(1&2), 123-138. Recuperado de encurtador.com.br/eloHT

Boruchovitch, E., Santos, A. A. A., & Oliveira, K. L. (2007). Análise da fidedignidade entre dois tipos de pontuação do Teste de Cloze. Psicologia em Pesquisa, 1 (01), 41-51. Recuperado de http://pepsic.bvsalud.org/scielo.php?script=sci_arttext&pid=S1982-12472007000100008

Brasil, Conselho Nacional de Saúde. (2016). Resolução CNS 510, de 07 de abril de 2016. Recuperado de http://conselho.saude.gov.br/resolucoes/2016/Reso510.pdf

Cagliari, L. C. (2010). Alfabetização e linguística. 11. ed. São Paulo: Scipione.

Chai, Z. F., Swanto, S., & Din, W. A. (2020). Variants of Cloze-Test Based Tasks and Vocabulary Achievement. Universal Journal of Educational Research, 8(7), 2980-2989. https://doi.org/10.13189/ujer.2020.080726 DOI: https://doi.org/10.13189/ujer.2020.080726

Cunha, N. B., Santos, A. A. A., & Oliveira, K. L. D. (2018). Evidências de validade por processo de resposta no Cloze. Fractal: Revista de Psicologia, 30(3), 330-337. https://doi.org/10.22409/1984-0292/v30i3/5817

Chapelle, C. A., & Abraham, R. G. (1990). Cloze method: what difference does it make? Language Testing, 7(2), 121-146. https://doi.org/10.1177/026553229000700201 DOI: https://doi.org/10.1177/026553229000700201

Cunha, N. B., Ferraz, A. S., & Santos, A. A. A. Estudo psicométrico do Questionário de Avaliação da Consciência Metatextual. (2020). (manuscrito submetido). Programa de Pós-Graduação Stricto Sensu em Psicologia: Universidade São Francisco. DOI: https://doi.org/10.15689/ap.2021.2004.21981.01

Cunha, N. B., Santos, A. A. A., & Oliveira, K. L. (2018). Evidências de validade por processo de resposta no Cloze. Fractal: Revista de Psicologia, 30(3), 330-337. doi: https://doi.org/10.22409/1984-0292/v30i3/5817 DOI: https://doi.org/10.22409/1984-0292/v30i3/5817

Fonseca, M. C. M., & Caliatto, S. G. (2016). Avaliação motora e sua correlação com a escrita ortográfica. Argumentos Pró-Educação, 1(1). https://doi.org/10.24280/ape.v1i1.78 DOI: https://doi.org/10.24280/ape.v1i1.78

García, J. N. (1998). Manual de dificuldades de aprendizagem: linguagem, leitura, escrita e matemática. Tradução de Jussara Haubert Rodrigues. Porto Alegre: Artmed.

Graham, S., & Hebert, M. (2011). Writing to read: A meta-analysis of the impact of writing and writing instruction on reading. Harvard Educational Review, 81(4), 710-744. https://doi.org/10.17763/haer.81.4.t2k0m13756113566 DOI: https://doi.org/10.17763/haer.81.4.t2k0m13756113566

Guimarães, S. B., & Mota, M. M. P. E. D. (2016). Qual a contribuição da consciência morfológica das crianças na precisão de leitura de palavras e compreensão de texto no português?. Estudos de Psicologia (Natal), 21(3), 239-248. http://dx.doi.org/10.5935/1678-4669.20160023 DOI: https://doi.org/10.5935/1678-4669.20160023

Hebert, M., Simpson, A., & Graham, S. (2013). Comparing effects of different writing activities on reading comprehension: A meta-analysis. Reading and Writing, 26(1), 111-138. https://doi.org/10.1007/s11145-012-9386-3 DOI: https://doi.org/10.1007/s11145-012-9386-3

Jasp. (2018). Statistical analysis in Jasp: A guide for students. Mark A Goss-Sampson.

Juan-Garau, M., Prieto-Arranz, J. I., & Salazar-Noguera, J. (2015). Lexico-grammatical development in secondary education CLIL learners. In M. Juan-Garau & J. Salazar-Noguera (Eds.). Content-based language learning in multilingual educational environments (pp. 179-195). Springer, Cham. DOI: https://doi.org/10.1007/978-3-319-11496-5_11

Kongsuwan Nakul, K. (2015). Theoretical considerations of applications and implications of concordance-based cloze tests. Lit Linguist Computing, 30(4), 541-558. doi: https://doi.org/10.1093/llc/fqu033 DOI: https://doi.org/10.1093/llc/fqu033

Loh, F. C. H., & Chia, N. K. H. (2013). Effectiveness of semantic cloze procedure to improve reading comprehension of weak readers in a primary school. Journal of the American Academy of Special Education Professionals, 73-118. Recuperado de https://repository.nie.edu.sg/bitstream/10497/4697/3/LohFaithCheeHui-MED.html

MacArthur, C., & Graham, S. (2016). Writing research from a cognitive perspective. In: Macarthur, C., Graham, S., & Fitzgerald, J. (Ed.) Handbook of writing research: second edition. pp. 24-40.New York: Guilford.

Marôco, J. (2014). Análise de equações estruturais: Fundamentos teóricos, software & aplicações. Pêro Pinheiro, Portugal: ReportNumber.

Mota, M. M. P. E., & Santos, A. A. A. (2014). The Cloze evaluation as a measure of reading ability in primary education. Psicologia Escolar e Educacional, 18(1), 135-142. https://doi.org/10.1590/S1413-85572014000100014 DOI: https://doi.org/10.1590/S1413-85572014000100014

Murphy, K. R., & Davidshofer, C. O. (1988). Psychological testing: Principles and applications. Englewood Cliffs, New Jersey: Prentice Hall.

Muthén, L. K., & Muthén, B. O. (1998-2012). Mplus user’s guide. (6th ed.). Los Angeles, CA: Muthén & Muthén.

Muthén, L. K., & Muthén, B. O. (2010). Mplus User’s Guide: Statistical Analysis with Latent Variables (6th ed.). Los Angeles

Oliveira, K. L., Santos, A. A., Boruchovitch, E., & Rueda, F. J. M. (2012). Compreensão da leitura: análise do funcionamento diferencial dos itens de um Teste de Cloze. Psicologia: Reflexão e Crítica, 25(2), 221-229. https://doi.org/10.1590/S0102-79722012000200003 DOI: https://doi.org/10.1590/S0102-79722012000200003

Peterson, R. A., & Kim, Y. (2013). On the relationship between coefficient alpha and composite reliability. Journal of Applied Psychology, 98(1), 194–198. https://doi.org/10.1037/a0030767 DOI: https://doi.org/10.1037/a0030767

Rocha, G., & Fontes-Martins, R. (2014). A apropriação de habilidades de leitura e escrita na alfabetização: estudo exploratório de dados de uma avaliação externa. Ensaio: Avaliação e Políticas Públicas em Educação, 22(85), 977-1000. https://doi.org/10.1590/S0104-40362014000400006 DOI: https://doi.org/10.1590/S0104-40362014000400006

Santos, A. A. A. (2005). Evidências de validade de critério para o Teste de Cloze. (Manuscrito não publicado). Universidade São Francisco, Itatiba-SP.

Santos, A. A. A., & Ferraz, A. S. (2017). Avaliação de habilidades relacionadas à compreensão de leitura no ensino fundamental. Psico, 48(1), 21-30. http://dx.doi.org/10.15448/1980-8623.2017.1.24376 DOI: https://doi.org/10.15448/1980-8623.2017.1.24376

Santos, A. A. A., Ferraz, A. S., & Rueda, F. J. M. (2018). Relações entre a Compreensão de Leitura e as Habilidades Metalinguísticas. Psicologia Escolar e Educacional, 22(2), 301-309. http://dx.doi.org/10.1590/2175-35392018026239 DOI: https://doi.org/10.1590/2175-35392018026239

Santos, A. A. A., & Fernandes, E. S. O. (2016). Habilidade de escrita e compreensão de leitura como preditores de desempenho escolar. Psicologia Escolar e Educacional, 20(3), 465-473. https://doi.org/10.1590/2175-3539201502031013 DOI: https://doi.org/10.1590/2175-3539201502031013

Santos, A. A. A., & Monteiro, R. M. (2016). Validade do Cloze enquanto técnica de avaliação da compreensão de leitura. Estudos Interdisciplinares em Psicologia, 7(2), 86-100. Recuperado de http://pepsic.bvsalud.org/pdf/eip/v7n2/a06.pdf DOI: https://doi.org/10.5433/2236-6407.2016v7n2p86

Sisto, F. F. (2005). Escala de Avaliação da Escrita (EAVE). (Relatório técnico não publicado). Programa de Pós-Graduação Stricto Sensu em Psicologia: Universidade São Francisco.

Suehiro, A. C. B., & Hohlenwerger, V. L. (2014). Escrita em grupo de escolares. Avaliação Psicológica, 13(3), 391-398. Recuperado de https://www.redalyc.org/pdf/3350/335037824011.pdf

Suehiro, A. C. B., & Magalhães, M. M. D. S. (2014). Relação entre medidas de Avaliação da Linguagem Escrita em estudantes do Ensino Fundamental. Psico-USF, 19(3), 489-498. https://doi.org/10.1590/1413-82712014019003011 DOI: https://doi.org/10.1590/1413-82712014019003011

Suehiro, A. C. B., & Santos, A. A. A. (2012). Validade concorrente entre instrumentos de avaliação da compreensão em leitura e da escrita. Psicologia Argumento, 30(68), 131-138. http://dx.doi.org/10.7213/psicol.argum.5891 DOI: https://doi.org/10.7213/psicol.argum.5891

Suehiro, A. C. B., & Santos, A. A. A. (2015). Compreensão de leitura e consciência fonológica: evidências de validade de suas medidas. Estudos de Psicologia, 32(2), 201-211. https://doi.org/10.1590/0103-166X2015000200005 DOI: https://doi.org/10.1590/0103-166X2015000200005

Taylor, W. L. (1953). Cloze procedure: A new tool for measuring readability. Journalism Quarterly, 30(4), 415-433. https://doi.org/10.1177/107769905303000401 DOI: https://doi.org/10.1177/107769905303000401

Zucoloto, K. A., & Sisto, F. F. (2002). Dificuldades de aprendizagem em escrita e compreensão em leitura. Interação, 6(2), 157-166. http://dx.doi.org/10.5380/psi.v6i2.3303 DOI: https://doi.org/10.5380/psi.v6i2.3303