Skip to main content
Weiter zur Homepage der Europäischen Kommission (öffnet in neuem Fenster)
Deutsch de
CORDIS - Forschungsergebnisse der EU
CORDIS

SONATA: Brain-Aligned Neural Architectures for Real-Time Sound Recognition

Projektbeschreibung

Besseres Verständnis von Klang erreichen

Menschen können Sprache, Musik und Umgebungsgeräusche schnell erkennen, selbst in lauten oder unberechenbaren Umgebungen. Bei den derzeitigen KI-Systemen gibt es immer noch Schwierigkeiten mit dieser Flexibilität, da sie oft anhand statischer Datensätze lernen, anstatt Geräusche wie das Gehirn auf dynamische Weise zu verarbeiten. Das Team des innerhalb der Marie-Skłodowska-Curie-Maßnahmen unterstützten Projekts SONATA wird Aufzeichnungen der menschlichen Gehirnaktivität nutzen, um intelligentere KI-Systeme zur Geräuscherkennung zu entwickeln. Mithilfe der Magnetoenzephalografie, mit der Hirnsignale in Millisekundengenauigkeit gemessen werden, wird die Forschungsgruppe vergleichen, wie das Gehirn und KI-Modelle Klänge darstellen. Diese Erkenntnisse werden die Entwicklung biologisch inspirierter neuronaler Netzwerke leiten. Die Projektergebnisse könnten die Neurowissenschaften voranbringen, Unterstützungstechnologien für das Hören verbessern und audiobasierte KI-Anwendungen aufwerten.

Ziel

SONATA (Sound-Oriented Neural-AI Alignment for Temporal Audition) addresses a core scientific and technological challenge: artificial systems still lack the human brain’s ability to interpret sounds quickly and flexibly. While the brain extracts meaning from sound through dynamic, multiscale processing, current AI systems are trained on static datasets and often fail in unpredictable or noisy conditions. SONATA proposes a new strategy: using high-resolution brain data to guide the development of deep learning models for sound recognition. Specifically, it develops biologically inspired multistream neural networks and constrains their architecture using recordings from magnetoencephalography (MEG), a non-invasive technique that captures brain activity with millisecond precision. The key innovation lies in integrating tools from cognitive neuroscience—such as Representational Similarity Analysis—into the training and evaluation pipeline. These techniques allow the project to align internal model representations with those observed in the brain. The action is structured around three objectives: (O1) design of neuro-inspired model architectures; (O2) incorporation of both theoretical and data-driven neural constraints; and (O3) dual benchmarking of functional accuracy and biological plausibility. SONATA is hosted at Aix-Marseille Université under the supervision of Dr. Bruno Giordano, and will generate open-source tools and insights with applications in auditory neuroscience, AI, and assistive hearing technologies.

Wissenschaftliches Gebiet (EuroSciVoc)

Schlüsselbegriffe

Programm/Programme

Thema/Themen

Finanzierungsplan

HORIZON-TMA-MSCA-PF-EF - HORIZON TMA MSCA Postdoctoral Fellowships - European Fellowships

Alle im Rahmen dieses Finanzierungsinstruments finanzierten Projekte anzeigen

Aufforderung zur Vorschlagseinreichung

(öffnet in neuem Fenster) HORIZON-MSCA-2025-PF

Alle im Rahmen dieser Aufforderung zur Einreichung von Vorschlägen finanzierten Projekte anzeigen

Koordinator

UNIVERSITE D'AIX MARSEILLE
Netto-EU-Beitrag
€ 226 420,56
Adresse
BOULEVARD CHARLES LIVON 58 LE PHARO
13284 Marseille
Frankreich
Region
Provence-Alpes-Côte d’Azur Provence-Alpes-Côte d’Azur Bouches-du-Rhône
Aktivitätstyp
Higher or Secondary Education Establishments
Links
Gesamtkosten
Keine Daten