European Commission logo
polski polski
CORDIS - Wyniki badań wspieranych przez UE
CORDIS

Making sense of the senses: Causal Inference in a complex dynamic multisensory world

Opis projektu

Jak mózg rozwiązuje problem scalania w złożonych środowiskach wieloźródłowych?

Wyobraźmy sobie tętniące życiem targowisko z niezliczonymi bodźcami wzrokowymi i słuchowymi. Aby je przetworzyć, mózg musi zmierzyć się z „wnioskowaniem przyczynowym” lub tzw. „problemem scalania”, co pozwala mu zidentyfikować, a następnie zintegrować tylko te sygnały, które pochodzą z jednego, wspólnego źródła. Jednak w rzeczywistych warunkach znalezienie optymalnego rozwiązania tego złożonego problemu obliczeniowego stanowi nie lada wyzwanie. Finansowany przez Europejską Radę ds. Badań Naukowych projekt MakingSense łączy metody behawioralne, obliczeniowe i neuroobrazowania, aby ustalić, w jaki sposób mózg rozwiązuje problem wnioskowania przyczynowego w coraz bardziej realistycznych środowiskach. Jego uczestnicy przyjęli hipotezę, według której mózg oblicza przybliżone rozwiązania poprzez sekwencyjną selekcję sygnałów w celu integracji percepcyjnej na podstawie wymogów związanych z określonym zadaniem, naszych wcześniejszych doświadczeń oraz oczekiwań. Te przełomowe badania mogą zmienić nasze rozumienie ludzkiej percepcji, stać się przyczynkiem do opracowania nowych algorytmów sztucznej inteligencji, a także dostarczyć nowej wiedzy na temat problemów związanych z percepcją, z którymi zmaga się wiele osób chorych.

Cel

To interact effectively with the complex dynamic and multisensory world (e.g. traffic) the brain needs to transform the barrage of signals into a coherent percept. This requires it to solve the causal inference or binding problem - deciding which signals come from common sources and integrating those accordingly. Doing so exactly (i.e. optimally) is wildly computationally intractable for all but the simplest laboratory scenes. It is unknown how the brain computes approximate solutions for realistic scenes in the face of resource constraints.

This ambitious interdisciplinary project combines statistical, computational, behavioural and neuroimaging (3/7T-fMRI, MEG/EEG, TMS) methods to determine how, and how well, the brain solves the causal inference problem in progressively richer multisensory environments.

The key hypothesis is that observers compute approximate solutions by sequentially selecting subsets of signals for perceptual integration via attentional and active sensing mechanisms guided by the perceptual tasks they are executing, their prior expectations about the world’s causal structure, and bottom-up salience maps. I will build parallel normative/approximate Bayesian and transformer network models of these processes and combine those with behaviour and neuroimaging to unravel the neurocomputational mechanisms.

The project will develop a novel computational and neuromechanistic account of causal inference in more realistic multisensory scenes, addressing fundamental questions about binding, inference and probabilistic computations. By bringing lab research closer to the real world it will radically alter our perspectives - shifting from near-optimal passive perception in simple scenes to active information gathering in the service of approximate solutions in more realistic scenes. It has the potential to inspire new AI algorithms and drive transformative insights into the perceptual difficulties older and clinical populations face in the real-world.

Instytucja przyjmująca

STICHTING RADBOUD UNIVERSITEIT
Wkład UE netto
€ 2 499 527,00
Adres
HOUTLAAN 4
6525 XZ Nijmegen
Niderlandy

Zobacz na mapie

Region
Oost-Nederland Gelderland Arnhem/Nijmegen
Rodzaj działalności
Higher or Secondary Education Establishments
Linki
Koszt całkowity
€ 2 499 527,00

Beneficjenci (1)