Skip to main content
Ir a la página de inicio de la Comisión Europea (se abrirá en una nueva ventana)
español español
CORDIS - Resultados de investigaciones de la UE
CORDIS

Natural Auditory SCEnes in Humans and Machines: Establishing the Neural Computations of Everyday Hearing

Descripción del proyecto

Observar el encéfalo para entender los sonidos cotidianos

Entornos como oficinas y metros están repletos de sonidos que influyen en nuestra conciencia y percepción del entorno. Entender cómo interpreta nuestro encéfalo estos sonidos es un reto, sobre todo para las personas con deficiencias auditivas. El equipo del proyecto NASCE, financiado por el CEI, tiene como objetivo establecer la hipótesis de segmentación semántica (SSH, por sus siglas en inglés) para avanzar en nuestra comprensión del análisis de escenas auditivas en el mundo real. En la SSH se sugiere que las representaciones semánticas desempeñan un papel en el análisis de escenas auditivas, desplazando el foco de atención del procesamiento acústico a la comprensión de los sonidos cotidianos. En el proyecto se estudia cómo el encéfalo crea y utiliza las representaciones semánticas de las fuentes sonoras, y cómo estas representaciones interactúan con el procesamiento acústico para ayudar al reconocimiento de los distintos sonidos. El equipo del proyecto pretende explorar la dinámica encefálica para comprender la percepción auditiva.

Objetivo

In an office, on a metro, or at home, diverse sounds may be surrounding you: a computer fan, footsteps and indistinct chatter, distant cars, the train slowing down. These sounds shape our environmental awareness, even when visual cues are absent. Despite its ecological relevance, understanding how our brain parses the acoustic scene into semantic objects remains a major scientific challenge. Moreover, individuals with hearing impairments, including those relying on hearing aids or cochlear implants, face challenges, both auditory and cognitive, in environments with multiple sound sources. The NASCE project aims to mechanistically comprehend real-world auditory scene analysis (ASA) through a novel framework: the Semantic Segmentation Hypothesis (SSH). The SSH posits that semantic representations drive real-world ASA, shifting the focus from early acoustic processing to the semantic analysis of everyday sounds. It addresses fundamental questions, such as: How does the brain create semantic sound source representations? How do they interact with acoustic processing, and aid our ability to recognize sounds in a scene? NASCE integrates cognitive psychology, neuroscience, and AI methods. Employing neuroimaging and behavioral paradigms, we aim to reveal how the brain dynamically represents auditory scenes across brain regions for relevant listening tasks. Using deep neural networks and ontologies, we aim to construct neuroscientifically grounded computational models simulating cerebral and behavioral responses under the same scenes and tasks as in the experiments. Finally, with advanced analytical methods we will consolidate behavioral, computational, and neuroscientific insights and establish SSH as a groundbreaking theory of ASA. NASCE promotes a paradigm shift, fundamentally reshaping our comprehension of ecological hearing. Moreover, it paves the way for the applications in machine hearing of computational models that mimic human auditory cognition.

Régimen de financiación

HORIZON-ERC-SYG -

Institución de acogida

UNIVERSITEIT MAASTRICHT
Aportación neta de la UEn
€ 5 077 960,00
Dirección
MINDERBROEDERSBERG 4
6200 MD Maastricht
Países Bajos

Ver en el mapa

Región
Zuid-Nederland Limburg (NL) Zuid-Limburg
Tipo de actividad
Institutos de educación secundaria o superior
Enlaces
Coste total
€ 5 077 960,00

Beneficiarios (2)

Mi folleto 0 0