Ocular fixations modulate audiovisual semantic congruency when standing in an upright position
Las fijaciones oculares modulan la congruencia semántica audiovisual cuando el cuerpo está en una posición erguida
Guillermo Rodríguez-Martínez , Henry Castillo-Parra , Pedro J. Rosa , Fernando Marroquín-Ciendúa
Suma Psicológica, (2021), 28(1), pp. 43-51.
Received 2 June 2020
Accepted 16 October 2020
Introducción: La congruencia semántica audiovisual es el proceso por el cual información de una modalidad sensorial visual se percibe como integrada a estímulos auditivos, porque coinciden en términos de simultaneidad y correspondencia semántica. Este estudio tuvo por objeto establecer si los perceptos visuales que se corresponden semánticamente a estímulos auditivos están asociados con las fijaciones oculares realizadas en áreas de modulación bottom-up, tanto en una postura corporal definida por la alineación entre la dirección vertical hacia arriba y los ejes vectoriales idiotrópicos, como en otra orientación definida por una oposición vectorial entre la vertical hacia arriba y el eje idiotrópico de la cabeza. Método: Dos grupos fueron seleccionados (uno por cada posición), tomados de una muestra de 88 personas. Los datos se obtuvieron por medio de un dispositivo fijo de registro de movimientos oculares de 120 Hz. Una imagen biestable se presentó, proporcionando estímulos auditivos de fondo para producir congruencias semánticas y establecer su relación con las fijaciones oculares. Resultados: Se encontró que la congruencia semántica audiovisual está asociada con áreas de fijación ocular cuando los vectores idiotrópicos están alineados con la dirección vertical ascendente. Las fijaciones oculares en áreas de modulación bottom-up no están asociadas con la congruencia semántica audiovisual cuando el vector idiotrópico de la cabeza está alineado con el vector gravitacional. En esta última posición, la cantidad de fijaciones oculares es significativamente menor. Conclusión: La posición del cuerpo puede afectar procesos perceptuales visuales que, a su vez, inciden en el efecto de congruencia semántica.
Palabras clave:
Congruencia semántica, fijaciones oculares, percepción biestable, orientación del cuerpo
Introduction: Multisensory audiovisual semantic congruency is the process by which visual information is perceived as integrated to auditory stimuli, because both coincide in terms of simultaneity and semantic correspondence. This study was aimed at establishing whether visual percepts, which semantically correspond to auditory stimuli, are associated with ocular fixations in modulating bottom-up areas while keeping a body posture alignment between the up-direction and the idiotropic axes, as well as in another orientation corresponding to a vectorial opposition between the up-direction and the head idiotropic axis. Method: Two groups (one for each position) were selected from a sample of 88 people. A bistable image was presented on a screen of a fixed 120 Hz eye-tracker device, providing background auditory stimuli so as to establish semantic congruencies and their relations to ocular fixations. Results: It was found that audiovisual semantic congruency is associated with fixations when idiotropic vectors are aligned with the up direction. Fixations manifested in bottom-up modulating areas are not associated with multisensory audiovisual semantic congruency when the head idiotropic vector is parallel with the gravity vector. Eye fixations decrease significantly if the head idiotropic axis is aligned with the gravity vector. Conclusion: It is concluded that body position can affect visual perceptual processes involved in the occurrence of semantic congruency.
Keywords:
Crossmodal semantic congruency, ocular fixations, bistable perception, body orientation
Angelaki, D. E., Klier, E. M., & Snyder, L. H. (2009). A vestibular sensation: Probabilistic approaches to spatial perception. Neuron, 64(4), 448-461. https://doi.org/10.1016/j.neuron.2009.11.010
Balint, T. S., & Hall, A. (2015). Humanly space objects — perception and connection with the observer. Acta Astronautica, 110, 129-144. https://doi.org/10.1016/j.actaastro.2015.01.010
Bonnet, C. (1994). Psicofísica de los tiempos de reacción: teorías y métodos. Revista Latinoamericana de Psicología, 26(3), 431-444.
Brouwer, G. J., & van Ee, R. (2006). Endogenous influences on perceptual bistability depend on exogenous stimulus characteristics. Visual Research, 46(20), 3393-3402. https://doi.org/10.1016/j.visres.2006.03.016
Clarke, A. H. (2008). Listing’s plane and the otolith-mediated gravity vector. Progress in Brain Research, 171, 291-294. https://doi.org/10.1016/S0079-6123(08)00642-0
Clément, G., & Eckardt, J. (2005). Influence of the gravitational vertical on geometric visual illusions. Acta Astronautica, 56(9-12), 911-917. https://doi.org/10.1016/j.actaastro.2005.01.017
Cohen, J. (1992). A power primer. Psychological Bulletin, 112(1), 155. https://doi.org/10.1037/0033-2909.112.1.155
Ferrè, E. R., Walther, L. E., & Haggard, P. (2015). Multisensory interactions between vestibular, visual and somatosensory signals. PLoS One, 10(4), e0124573. https://doi.org/10.1371/journal.pone.0124573
Gale, A., & Findlay, J. (1983). Eye-movement patterns in viewing ambiguous figures. In Eye movements and psychological functions: International views (pp. 145-168). Hillsdale NJ: LEA.
García-Pérez, M. (1989). Visual inhomogeneity and eye movements in multistable perception. Perception & Psychophysics, 46(4), 397-400. https://doi.org/10.3758/BF03204995
Gaunet, F., & Berthoz, A. (2000). Mental rotation for spatial environment recognition. Cognitive Brain Research, 9(1), 91-102. https://doi.org/10.1016/S0926-6410(99)00038-5
Haji-Khamneh, B., & Harris, L. R. (2010). How different types of scenes affect the Subjective Visual Vertical (SVV) and the Perceptual Upright (PU). Vision Research, 50(17), 1720-1727. https://doi.org/10.1016/j.visres.2010.05.027
Hsiao, J., Chen, Y., Spence, C., & Yeh, S. (2012). Assessing the effects of audiovisual semantic congruency on the perception of a biestable figure. Consciousness and Cognition, 21(2), 775-787. https://doi.org/10.1016/j.concog.2012.02.001
Laurienti, P. J., Kraft, R. A., Maldjian, J. A., Burdette, J. H., & Wallace, M. T. (2004). Semantic congruence is a critical factor in multisensory behavioural performance. Experimental Brain Research, 158(4), 405-414. https://doi.org/10.1007/s00221-004-1913-2
Lopez, C., Lacour, M., El Ahmadi, A., Magnan, J., & Borel, L. (2007). Changes of visual vertical perception: A long-term sign of unilateral and bilateral vestibular loss. Neuropsychologia, 45(9), 2025-2037. https://doi.org/10.1016/j.neuropsychologia.2007.02.004
Lopez, C., Lacour, M., Léonard, J., Magnan, J., & Borel, L. (2008). How body position changes visual vertical perception after unilateral vestibular loss. Neuropsychologia, 46(9), 2435-2440. https://doi.org/10.1016/j.neuropsychologia.2008.03.017
Marroquín-Ciendúa, F., Rodríguez, G., & Rodríguez-Celis, H. G. (2020). Modulación de la percepción biestable: un estudio basado en estimulación multimodal y registros de actividad oculomotora. Tesis Psicológica, 15(1), 1-30.
Mittelstaedt, H. (1983). A new solution to the problem of the subjective vertical. Naturwissenschaften, 70(6), 272-281. https://doi.org/10.1007/BF00404833
Oman, C. M. (2003). Human visual orientation in weightlessness. In L. Harris & M. Jenkin (Eds.), Levels of Perception. New York, NY: Springer. https://doi.org/10.1007/0-387-22673-7_19
Rodríguez-Martínez, G., & Castillo-Parra, H. (2018a). Tareas de búsqueda visual: modelos, bases neurológicas, utilidad y prospectiva. Universitas Psychologica, 17(1), 1-12. https://doi.org/10.11144/Javeriana.upsy17-1.tbvm
Rodríguez-Martínez, G., & Castillo-Parra, H. (2018b). Bistable perception: Neural bases and usefulness in psychological research. International Journal of Psychological Research, 11(2), 63-76. https://doi.org/10.21500/20112084.3375
Smith, E., Grabowecky, M., & Susuki, S. (2007). Auditory-visual crossmodal integration in perception of face gender. Current Biology, 17, 1680-1685. https://doi.org/10.1016/j.cub.2007.08.043
Spence, C. (2007). Audiovisual multisensory integration. Acoustical Science and Technology, 28(2), 61-70. https://doi.org/10.1250/ast.28.61
Spence, C. (2011). Crossmodal correspondences: A tutorial review. Attention, Perception, & Psychophysics, 73(4), 971-995. https://doi.org/10.3758/s13414-010-0073-7
Spence, C., & Squire, S. (2003). Multisensory integration: Maintaining the perception of synchrony. Current Biology, 13(13), R519-R521. https://doi.org/10.1016/S0960-9822(03)00445-7
Vatakis, A., & Spence, C. (2008). Evaluating the influence of the “unity assumption” on the temporal perception of realistic audiovisual stimuli. Acta Psychologica, 127, 12-23. https://doi.org/10.1016/j.actpsy.2006.12.002
Yamamoto, S., & Yamamoto, M. (2006). Effects of the gravitational vertical on the visual perception of reversible figures. Neuroscience Research, 55(2), 218-221. https://doi.org/10.1016/j.neures.2006.02.014
Yeh, S., Hsiao, J., Chen, Y., & Spence, C. (2011). Interplay of multisensory processing, attention, and consciousness as revealed by bistable figures. i-Perception, 2(8), 910. https://doi.org/10.1068/ic910
Dejar un comentario
¿Quieres unirte a la conversación?Siéntete libre de contribuir