Skip to main content
Przejdź do strony domowej Komisji Europejskiej (odnośnik otworzy się w nowym oknie)
polski pl
CORDIS - Wyniki badań wspieranych przez UE
CORDIS

SONATA: Brain-Aligned Neural Architectures for Real-Time Sound Recognition

Opis projektu

Lepsze zrozumienie dźwięku

Ludzie potrafią szybko rozpoznawać mowę, muzykę i dźwięki otoczenia, nawet w hałaśliwym i nieprzewidywalnym otoczeniu. Obecne systemy sztucznej inteligencji wciąż mają problem z osiągnięciem zbliżonej elastyczności, ponieważ często uczą się ze statycznych zbiorów danych, zamiast przetwarzać dźwięki dynamicznie, tak jak robi to mózg. W projekcie SONATA, korzystającym ze wsparcia programu działania „Maria Skłodowska-Curie”, wykorzystane zostaną zapisy aktywności ludzkiego mózgu do zaprojektowania bardziej inteligentnych systemów AI do rozpoznawania dźwięków. Wykorzystując magnetoencefalografię, która pozwala na pomiar sygnałów mózgowych z dokładnością do milisekundy, naukowcy porównają sposób, w jaki mózg i modele sztucznej inteligencji reprezentują dźwięki. Wnioski te będą stanowić podstawę tworzenia sieci neuronowych inspirowanych biologią. Wyniki projektu mogą przyczynić się do rozwoju neuronauki, udoskonalenia technologii wspomagających słuch i wzmocnienia zastosowań AI w zakresie dźwięku.

Cel

SONATA (Sound-Oriented Neural-AI Alignment for Temporal Audition) addresses a core scientific and technological challenge: artificial systems still lack the human brain’s ability to interpret sounds quickly and flexibly. While the brain extracts meaning from sound through dynamic, multiscale processing, current AI systems are trained on static datasets and often fail in unpredictable or noisy conditions. SONATA proposes a new strategy: using high-resolution brain data to guide the development of deep learning models for sound recognition. Specifically, it develops biologically inspired multistream neural networks and constrains their architecture using recordings from magnetoencephalography (MEG), a non-invasive technique that captures brain activity with millisecond precision. The key innovation lies in integrating tools from cognitive neuroscience—such as Representational Similarity Analysis—into the training and evaluation pipeline. These techniques allow the project to align internal model representations with those observed in the brain. The action is structured around three objectives: (O1) design of neuro-inspired model architectures; (O2) incorporation of both theoretical and data-driven neural constraints; and (O3) dual benchmarking of functional accuracy and biological plausibility. SONATA is hosted at Aix-Marseille Université under the supervision of Dr. Bruno Giordano, and will generate open-source tools and insights with applications in auditory neuroscience, AI, and assistive hearing technologies.

Dziedzina nauki (EuroSciVoc)

Słowa kluczowe

Program(-y)

Temat(-y)

System finansowania

HORIZON-TMA-MSCA-PF-EF - HORIZON TMA MSCA Postdoctoral Fellowships - European Fellowships

Wyświetl wszystkie projekty finansowane w ramach tego programu finansowania

Zaproszenie do składania wniosków

(odnośnik otworzy się w nowym oknie) HORIZON-MSCA-2025-PF

Wyświetl wszystkie projekty finansowane w ramach tego zaproszenia

Koordynator

UNIVERSITE D'AIX MARSEILLE
Wkład UE netto
€ 226 420,56
Adres
BOULEVARD CHARLES LIVON 58 LE PHARO
13284 Marseille
Francja
Region
Provence-Alpes-Côte d’Azur Provence-Alpes-Côte d’Azur Bouches-du-Rhône
Rodzaj działalności
Higher or Secondary Education Establishments
Linki
Koszt całkowity
Brak danych