Opis projektu
Rewolucja w zakresie dźwięku 3D w wirtualnej rzeczywistości
W dobie rozwijających się interfejsów cyfrowych i rzeczywistości wirtualnej (VR) nasze doświadczanie przestrzeni 3D staje się coraz bardziej wizualne. W tyle pozostają natomiast wrażenia dźwiękowe, zwłaszcza jeśli chodzi o dźwięki dobiegające z tyłu i słyszalne w płaszczyźnie pionowej. Istniejąca reprezentacja słuchowa w VR jest niewystarczająca, co ogranicza dostępność tej technologii i jej immersyjność. W tym kontekście finansowany przez Europejską Radę ds. Badań Naukowych projekt TouchingSpace360 zakłada stworzenie przełomowej metody słuchowo-dotykową, która symuluje przestrzenne treści dźwiękowe. To innowacyjne rozwiązanie ma wypełnić tę lukę, dzięki czemu VR stanie się bardziej inkluzywna i immersyjna. Od symulacji mowy po dźwięki otoczenia i ruch 3D – technologia ta znajdzie zastosowanie w edukacji, rozrywce, wellness i medycynie.
Cel
Digital interfaces & virtual reality (VR) are expected to penetrate more and more aspects of our everyday lives, from the domain of education, to entertainment, to wellness and even medicine. While impressive advancements have been made in visual display for smartphones and visual technology for representing 3D space in VR, the ability to do so via audio (particularly in the back and the vertical dimensions) remains very limited. Following an initial implementation developed under the NovelExperisense ERC grant (PI: Amedi), we present a novel (and patent pending) auditory-tactile method for simulating spatial localization of auditory content (such as speech, environmental sounds, movement in 3D, and more) through touch. This unique method can enhance accessibility for the hearing impaired and improve the overall VR experience for any individual in a wide range of applications. Here we suggest a line of experiments, further R&D and commercialization path for this intriguing and promising technology.
Dziedzina nauki
Słowa kluczowe
Program(-y)
- HORIZON.1.1 - European Research Council (ERC) Main Programme
System finansowania
HORIZON-ERC-POC - HORIZON ERC Proof of Concept GrantsInstytucja przyjmująca
4610101 Herzliya
Izrael