Sentidos em sinergia : efeito intermodal do que se vê sobre o que se escuta

Abstract

A interação sinérgica entre os sentidos é um aspecto fundamental para a nossa interação com o mundo. A natureza multimodal do ambiente ao nosso redor se manifesta através dos variados tipos de estímulos que se fazem presentes em mais de uma modalidade sensorial. A habilidade de combinar pistas provenientes de múltiplas modalidades sensoriais é uma função primordial do sistema nervoso, impactando profundamente o comportamento e a percepção, ainda que geralmente não tomemos consciência desses processos. Considerando a natureza ubíqua dos eventos multissensoriais na percepção, o estudo científico das interações entre diferentes modalidades é imprescindível para uma melhor compreensão sobre o funcionamento do sistema nervoso como um todo. Nesse sentido, o presente trabalho foi dedicado à revisão da literatura na pesquisa multissensorial e ao desenvolvimento e execução de um experimento sobre a relação intermodal entre estímulos audiovisuais em humanos. Na introdução compreensiva, inicialmente são apresentados alguns conceitos, definições, e os principais fundamentos subjacentes à percepção multissensorial, além de uma revisão sobre resultados experimentais de estudos prévios pertinentes. Em seguida, são levantadas questões metodológicas envolvidas no estudo das relações multissensoriais com a consciência, desenvolvendo ênfase na abordagem da metacognição. Adicionalmente, como adendo à introdução, é discutido de forma mais próxima o tema da percepção integrada na mente, apresentando um arcabouço teórico para a compreensão das bases neurais da memória e da consciência, a nível de sistemas, através de uma arquitetura hierárquica organizada em zonas de convergência divergência, proposta por Antonio Damasio. Em seguida, é apresentado um trabalho experimental na forma de manuscrito de um artigo científico, desenvolvido em colaboração com o Brain and Creativiy Institute da University of Southern California, sobre as influências intermodais que estímulos visuais semanticamente congruentes são capazes de exercer sobre a percepção auditiva em condições sub-limiares. Foram elaborados três paradigmas psicofísicos: de determinação de limiar perceptivo, de detecção e de identificação de estímulos auditivos. Por fim, são feitas conclusões sobre o trabalho como um todo e são incluídas as perspectivas futuras em decorrência dele.

The synergistic interaction between the senses is a fundamental aspect of our interaction with the world. The multimodal nature of the environment around us is a manifestation of the various types of stimuli that present themselves in more than one sensory modality. The ability to combine cues of multiple sensory modalities is a primary function of the nervous system, profoundly impacting the behavior and perception, even though generally we are not aware of processes. Considering the ubiquous nature of the multisensory perception, the scientific study of the interactions between different modalities plays an essential role for a better understanding about the functioning of the nervous system as a whole. In this sense, the present work was dedicated to the literature review in multisensory research and to the development and execution of an experiment on an intermodal relationship between audiovisual stimuli in humans. In the introduction, initially, some concepts, definitions and main foundations underlying the multisensory perception are reviewed, as well as experimental results from relevant previous studies. Then, methodological questions are raised involved in the study of multisensory relations with consciousness, plus developing an approach in the area of metacognition. In addition, the integrated perception of the mind is discussed, thus presenting a theoretical framework for the understanding of memory and consciousness, at systems level, by a neuronal hierarchical organization in zones of convergence divergence, as proposed by Antonio Damasio. Next, it is presented an experimental work as a manuscript of a scientific paper, developed in collaboration with the Brain and Creativiy Institute of the University of Southern California, on whether semantically congruent visual stimuli can exert cross-modal influences on auditory perception under sub-threshold conditions. Therefore, three psychophysical paradigms were elaborated: the determination of threshold perception, the detection and identification of stimuli. Finally, conclusions are drawn about the work as a whole and are included as future perspectives accordingly.