European Commission logo
español español
CORDIS - Resultados de investigaciones de la UE
CORDIS

Making sense of the senses: Causal Inference in a complex dynamic multisensory world

Descripción del proyecto

Cómo resuelve el encéfalo el problema de la vinculación en entornos complejos de múltiples fuentes

Imagínese pasear por un mercado bullicioso; para procesar la infinidad de imágenes y sonidos, el encéfalo se enfrenta al problema de la «inferencia causal» o «vinculación», mediante la determinación de qué señales proceden de fuentes comunes y la integración solo de dichas señales. Sin embargo, resolver de forma óptima esta compleja tarea computacional es todo un reto en la vida real. El equipo del proyecto MakingSense, financiado por Consejo Europeo de Investigación, combina métodos conductuales, computacionales y de neuroimagen para desentrañar cómo resuelve el encéfalo el problema de la inferencia causal en entornos cada vez más realistas. Su hipótesis es que el encéfalo calcula soluciones aproximadas seleccionando secuencialmente señales para la integración perceptiva en función de las exigencias de la tarea, nuestras experiencias pasadas y nuestras expectativas. Esta investigación pionera tiene el potencial de transformar nuestra comprensión de la percepción humana, inspirar nuevos algoritmos de inteligencia artificial y ofrecer información sobre los retos perceptivos a los que se enfrentan diversas poblaciones clínicas.

Objetivo

To interact effectively with the complex dynamic and multisensory world (e.g. traffic) the brain needs to transform the barrage of signals into a coherent percept. This requires it to solve the causal inference or binding problem - deciding which signals come from common sources and integrating those accordingly. Doing so exactly (i.e. optimally) is wildly computationally intractable for all but the simplest laboratory scenes. It is unknown how the brain computes approximate solutions for realistic scenes in the face of resource constraints.

This ambitious interdisciplinary project combines statistical, computational, behavioural and neuroimaging (3/7T-fMRI, MEG/EEG, TMS) methods to determine how, and how well, the brain solves the causal inference problem in progressively richer multisensory environments.

The key hypothesis is that observers compute approximate solutions by sequentially selecting subsets of signals for perceptual integration via attentional and active sensing mechanisms guided by the perceptual tasks they are executing, their prior expectations about the world’s causal structure, and bottom-up salience maps. I will build parallel normative/approximate Bayesian and transformer network models of these processes and combine those with behaviour and neuroimaging to unravel the neurocomputational mechanisms.

The project will develop a novel computational and neuromechanistic account of causal inference in more realistic multisensory scenes, addressing fundamental questions about binding, inference and probabilistic computations. By bringing lab research closer to the real world it will radically alter our perspectives - shifting from near-optimal passive perception in simple scenes to active information gathering in the service of approximate solutions in more realistic scenes. It has the potential to inspire new AI algorithms and drive transformative insights into the perceptual difficulties older and clinical populations face in the real-world.

Régimen de financiación

HORIZON-ERC - HORIZON ERC Grants

Institución de acogida

STICHTING RADBOUD UNIVERSITEIT
Aportación neta de la UEn
€ 2 499 527,00
Dirección
HOUTLAAN 4
6525 XZ Nijmegen
Países Bajos

Ver en el mapa

Región
Oost-Nederland Gelderland Arnhem/Nijmegen
Tipo de actividad
Higher or Secondary Education Establishments
Enlaces
Coste total
€ 2 499 527,00

Beneficiarios (1)