Skip to main content
European Commission logo
Deutsch Deutsch
CORDIS - Forschungsergebnisse der EU
CORDIS
CORDIS Web 30th anniversary CORDIS Web 30th anniversary

SONICOM - Transforming auditory-based social interaction and communication in AR/VR

Projektbeschreibung

Neuartige virtuelle Erfahrungen dank immersivem Klangerlebnis

Der Schall ist ein wichtiger Teil der menschlichen Erfahrung. Er ist einer der wichtigsten Sinneseindrücke für die Interaktion mit unserer Umwelt und hat daher einen erheblichen Einfluss darauf, wie wir die Welt wahrnehmen. In der virtuellen oder erweiterten Realität ist es unerlässlich, Klänge räumlich korrekt zu simulieren, um ein immersives virtuelles Erlebnis bereitstellen zu können. Allerdings geht die Simulation einer akustischen virtuellen bzw. erweiterten Realität mit vielen Herausforderungen einher. Mithilfe leistungsstarker künstlicher Intelligenz hat das EU-finanzierte Projekt SONICOM vor, den nächsten Meilenstein in der Simulation immersiver Klangerlebnisse zu erreichen. Das Ziel besteht darin, die nächste Generation von 3D-Audiotechnologien zu entwickeln, maßgeschneiderte Audio-Lösungen bereitzustellen und unsere Interaktionen mit der virtuellen Welt erheblich zu verbessern.

Ziel

Immersive audio is our everyday experience of being able to hear and interact with sounds around us. Simulating spatially located sounds in virtual or augmented reality (VR/AR) must be done in a unique way for each individual and currently requires expensive and time-consuming individual measurements, making it commercially unfeasible. Furthermore, the impact of immersive audio beyond perceptual metrics such as presence and localisation is still an unexplored area of research, specifically when related with social interaction, entering the behavioural and cognitive realms. SONICOM will revolutionise the way we interact socially within AR/VR environments and applications by leveraging methods from Artificial Intelligence (AI) to design a new generation of immersive audio technologies and techniques, specifically looking at personalisation and customisation of the audio rendering. Using a data-driven approach, it will explore, map and model how the physical characteristics of spatialised auditory stimuli can influence observable behavioural, physiological, kinematic, and psychophysical reactions of listeners within social interaction scenarios. The developed techniques and models will be evaluated in an ecologically valid manner, exploiting AR/VR simulations as well as real-life scenarios, and developing appropriate hardware and software proofs-of-concept. Finally, in order to reinforce the idea of reproducible research and promoting future development and innovation in the area of auditory-based social interaction, the SONICOM Ecosystem will be created, which will include auditory data closely linked with model implementations and immersive audio rendering components.

Aufforderung zur Vorschlagseinreichung

H2020-FETPROACT-2018-2020

Andere Projekte für diesen Aufruf anzeigen

Unterauftrag

H2020-FETPROACT-2020-2

Koordinator

IMPERIAL COLLEGE OF SCIENCE TECHNOLOGY AND MEDICINE
Netto-EU-Beitrag
€ 1 829 708,75
Adresse
SOUTH KENSINGTON CAMPUS EXHIBITION ROAD
SW7 2AZ LONDON
Vereinigtes Königreich

Auf der Karte ansehen

Region
London Inner London — West Westminster
Aktivitätstyp
Higher or Secondary Education Establishments
Links
Gesamtkosten
€ 1 829 708,75

Beteiligte (10)