Uma abordagem à leitura de legendas, percepção e compreensão de peças audiovisuais por meio da tecnologia de rastreamento ocular
Conteúdo do artigo principal
A pandemia de SARS-CoV-2 e as medidas implementadas para reduzir infecções geraram um aumento no
consumo digital em todo o mundo em diferentes idiomas, especialmente em experiências virtuais de aprendizado
e entretenimento, como plataformas de streaming onde há alto conteúdo de vídeos com legendas que são vistos
por pessoas de diferentes nacionalidades, por isso é fundamental analisar como as pessoas percebem a informação
neste tipo de plataforma e o uso e entendimento dado às legendas presentes neste tipo de vídeo. Esta pesquisa
utilizou uma abordagem mista, cujo objetivo foi analisar a percepção e compreensão leitora de legendas em peças
audiovisuais, durante a projeção de um documentário com o auxílio do software Sticky eye tracking e um questionário
qualitativo. Participaram 64 pessoas de 18 a 59 anos, que preencheram o consentimento informado e após assistirem
aos vídeos, responderam a um questionário de validação. Foi realizada análise estatística dos parâmetros de eye
tracking e informações contidas no questionário. Conclui-se que as legendas em espanhol como língua materna (L1)
são um suporte para pessoas competentes e não competentes em inglês (L2). Nos vídeos legendados em espanhol
com áudio em inglês (legendas interlíngues padrão) e espanhol (legendas intralíngues em L1) os caracteres foram
observados primeiro (com maior número de fixações) e depois as legendas, enquanto no vídeo dublado e sem
legenda aconteceu o contrário; no entanto, a maioria dos participantes considerou que se concentrava mais no texto.
Isso tem implicações para a análise psicolinguística e design de conteúdo.
Downloads
Detalhes do artigo
Álvarez, P. (2018). Una imagen vale más que mil palabras: La subtitulación como recurso didáctico en el aprendizaje de lenguas. Redit - Revista Electrónica De Didáctica De La Traducción Y La Interpretación, (11), 16-32. https://doi.org/10.24310/REDIT.2017.v0i11.3813 DOI: https://doi.org/10.24310/REDIT.2017.v0i11.3813
Andreu, C., Martín M., Gruart, A., & Delgado J. (2021). The Effect of Media Professionalization on Cognitive Neurodynamics During Audiovisual Cuts. Frontiers in systems neuroscience, 15. https://doi.org/10.3389/fnsys.2021.598383 DOI: https://doi.org/10.3389/fnsys.2021.598383
Anthonijsz, T. (2021). Are high-end and webcam eye trackers comparable? [Tesis de Pregrado, Utrecht University]. https://studenttheses.uu.nl/bitstream/handle/20.500.12932/40672/Anthonijsz%206642268.pdf?sequence=1#:~:text=High%2Dend%20eye%20trackers%20will,that%20require%20larger%2Dscale%20data
Ávila, C., Herrán, K., Muñoz, A., Rodríguez, N., & Torres, D. (2020). La subtitulación audiovisual en un mundo globalizado, ¿cumple su función?. Comunicación, Cultura Y Política, 9. https://doi.org/10.21158/21451494.v9.n0.2018.2729 DOI: https://doi.org/10.21158/21451494.v9.n0.2018.2729
BBC News Mundo. (2020). Coronavirus: ¿en qué casos es recomendable el autoaislamiento y cómo debe hacerse?. https://www.bbc.com/mundo/noticias-51875858
Bisson, M., Van Heuven, W., Conklin, K., & Tunney, R. (2014). Processing of native and foreign language subtitles in films: An eye tracking study. Applied Psycholinguistics, 35(2), 399-418. https://doi.org/10.1017/S0142716412000434 DOI: https://doi.org/10.1017/S0142716412000434
Casañ J. (2015). Un marco teórico sobre el uso de preguntas de comprensión audiovisual integradas en el vídeo como subtítulos: un estudio mixto. marcoELE Revista de Didáctica Español Lengua Extranjera, (20), 1-45 https://www.redalyc.org/articulo.oa?id=92152428015
Carballar, R., Martín, P., & Gámez, M. (2017). Relación entre habilidades neuropsicológicas y comprensión lectora en Educación Primaria. Cuadernos de Investigación Educativa, 8(2), 49-59. https://doi.org/10.18861/cied.2017.8.2.2686 DOI: https://doi.org/10.18861/cied.2017.8.2.2686
Chen, M. (2012). Effects of the order of reading text or viewing a film and L1/L2 captions on reading comprehension. Perceptual and motor skills, 115(1), 18–26. https://doi.org/10.2466/23.PMS.115.4.18-26 DOI: https://doi.org/10.2466/23.PMS.115.4.18-26
Díaz, J. (2012). Los subtítulos y la subtitulación en la clase de lengua extranjera. Abehache: Revista da Associação Brasileira de Hispanistas, 2(3), 99. https://bit.ly/2WxctRR
El Tiempo. (2021). Netflix en cuarentena, así fue el 2020 de la plataforma de «stream». El Tiempo. https://www.eltiempo.com/tecnosfera/apps/netflix-en-cuarentena-asi-fue-el-2020-de-la-plataforma-de-stream-561583
Fernández, G., Orozco, D., Mandolesi, P., & Agamennoni, O. (2017). Evaluación de patologías neurocognitivas mediante los movimientos oculares. CIC-DIGITAL Repositorio Institucional de la Comisión de Investigaciones Científicas. https://digital.cic.gba.gob.ar/handle/11746/6650
García, B. (2017). Bilingual subtitles for second‐language acquisition and application to engineering education as learning pills. Computer applications in engineering education, 25(3), 468-479. https://doi.org/10.1002/cae.21814 DOI: https://doi.org/10.1002/cae.21814
Gerber, O., & Szarkowska, A. (2018). Line breaks in subtitling: an eye tracking study on viewer preferences. Journal of eye movement research, 11(3). https://doi.org/10.16910/jemr.11.3.2 DOI: https://doi.org/10.16910/jemr.11.3.2
Gibaldi, A., Vanegas, M., Bex, P., & Maiello, G. (2017). Evaluation of the Tobii EyeX Eye tracking controller and Matlab toolkit for research. Behav Res 49, 923–946. https://doi.org/10.3758/s13428-016-0762-9 DOI: https://doi.org/10.3758/s13428-016-0762-9
González B., & Mañas, I. (2020). Efectos de los subtítulos intralingüísticos y los subtítulos bilingües aumentados sobre el aprendizaje incidental de vocabulario en español como lengua extranjera. RILEX. Revista Sobre Investigaciones léxicas, 3(2), 125–163. https://doi.org/10.17561/rilex.3.2.5808 DOI: https://doi.org/10.17561/rilex.3.2.5808
Hajmohammadi, A. (2004). The Viewer as the Focus of Subtitling Towards a Viewer-oriented Approach. Translation Journal, 8(4). http://translationjournal.net/journal/30subtitling.htm
Intraub, H. (2002). Visual scene perception. Encyclopedia of cognitive science. https://sites.udel.edu/cas-intraublab/files/2017/10/2002-Intraub-Encyclopedia-of-Cognitive-Sci-1uop5d8.pdf
Jääskeläinen, I., Sams, M., Glerean, E., & Ahveninen, J. (2021). Movies and narratives as naturalistic stimuli in neuroimaging. NeuroImage, 224, 117445. https://doi.org/10.1016/j.neuroimage.2020.117445 DOI: https://doi.org/10.1016/j.neuroimage.2020.117445
Jude, D. (2019). La subtitulación como estrategia de aprendizaje del español como LE [Tesis de Maestría, Universidad de Alicante]. https://rua.ua.es/dspace/bitstream/10045/96928/1/La_subtitulacion_como_estrategia_de_aprendizaje_del_espano_Jude__Diana_Ioana.pdf
Kruger, J., & Steyn, F. (2014). Subtitles and Eye Tracking: Reading and Performance. Reading Research Quarterly, 49(1), 105–120. https://doi.org/10.1002/rrq.59 DOI: https://doi.org/10.1002/rrq.59
Kruger, J., Doherty, S., Soto, M. (2017). Subtítulos en lengua original: sus efectos en el espectador nativo y extranjero. Comunicar, vol. XXV, núm. 50, enero-marzo, 2017, pp. 23-32. ISSN: 1134-3478. https://www.redalyc.org/articulo.oa?id=15849613002 DOI: https://doi.org/10.3916/C50-2017-02
Lavaur, J., & Bairstow, D. (2011), Languages on the screen: Is film comprehension related to the viewers’ fluency level and to the language in the subtitles?. International Journal of Psychology, 46: 455-462. https://doi.org/10.1080/00207594.2011.565343 DOI: https://doi.org/10.1080/00207594.2011.565343
Matielo, R., de Oliveira, R., & Baretta, L. (2018). Intralingual subtitles, interlingual subtitles, and video comprehension: insights from an exploratory study. Letrônica, 10(2), 758-774. https://doi.org/10.15448/1984-4301.2017.2.26370 DOI: https://doi.org/10.15448/1984-4301.2017.2.26370
Menacho, L. (2021). Estrategias colaborativas: aprendizaje compartido para el desarrollo de la comprensión lectora en estudiantes de educación primaria. Praxis educativa, 25(3), 243-258. https://dx.doi.org/10.19137/praxiseducativa-2021-250314 DOI: https://doi.org/10.19137/praxiseducativa-2021-250314
Muñoz, C. (2017). The role of age and proficiency in subtitle reading. An eye-tracking study. System, 67, 77-86. https://doi.org/10.1016/j.system.2017.04.015 DOI: https://doi.org/10.1016/j.system.2017.04.015
Navarro, Ó., & Molina, A., & Lacruz, M. (2016). Utilización de Eye Tracking para evaluar el uso de información verbal en materiales multimedia. Pixel-Bit. Revista de Medios y Educación, (48),51-66. ISSN: 1133-8482. https://www.redalyc.org/articulo.oa?id=36843409005 DOI: https://doi.org/10.12795/pixelbit.2016.i48.04
Papoutsaki, A. (2018). Democratizing Eye Tracking. http://cs.brown.edu/people/apapouts/Dissertation.pdf
Ramírez, A. (2012). Eye-tracking: una técnica de seguimiento de la mirada utilizada en la validación de unidades de aprendizaje. Instituto Tecnológico de Costa Rica. https://recursos.educoas.org/publicaciones/eye-tracking-una-t-cnica-se-seguimiento-de-la-mirada-utilizada-en-la-validaci-n-de
Sueyoshi, A. & Hardison, D. (2005). El papel de los gestos y las señales faciales en la comprensión auditiva de un segundo idioma. Aprendizaje de idiomas, 55(4), 661–699. https://doi.org/10.1111/j.0023-8333.2005.00320.x DOI: https://doi.org/10.1111/j.0023-8333.2005.00320.x
Szarkowska, A., & Gerber, O. (2018). Viewers can keep up with fast subtitles: Evidence from eye movements. PLoS ONE 13(6). https://doi.org/10.1371/journal.pone.0199331 DOI: https://doi.org/10.1371/journal.pone.0199331
Szarkowska, A., & Gerber, O. (2019). Two or three lines: a mixed-methods study on subtitle processing and preferences, Perspectives, 27:1, 144-164, https://doi.org/10.1080/0907676X.2018.1520267 DOI: https://doi.org/10.1080/0907676X.2018.1520267
Talaván, N. (2017). Justificación teórico-práctica del uso de los subtítulos en la enseñanza-aprendizaje de lenguas extranjeras. TRANS. Revista De Traductología, (16), 23-37. https://doi.org/10.24310/TRANS.2012.v0i16.3209 DOI: https://doi.org/10.24310/TRANS.2012.v0i16.3209
Tobii Pro. (2015). How to Work with Heat Maps and Gaze Plots. https://www.tobiipro.com/learn-and-support/learn/steps-in-an-eye-tracking-study/interpret/working-with-heat-maps-and-gaze-plots/
Tobii Pro. (2018). Sticky by Tobii Pro. https://www.tobiipro.com/es/products/sticky-by-tobii-pro/
Torralba, G. (2020). The Use of Passive and Active Subtitles in Foreign Language Teaching: A View to their Teaching Potential. Íkala, Revista de Lenguaje y Cultura, 25(1), 231-250. https://doi.org/10.17533/udea.ikala.v25n01a11 DOI: https://doi.org/10.17533/udea.ikala.v25n01a11
Wagner, E. (2007). “Are they watching? Test-taker viewing behavior during an L2 video listening test”. Language Learning and Technology, 11(1), 67-86. https://www.lltjournal.org/item/10125-44089/