Opis projektu
Modelowanie przetwarzania wielozmysłowego obiektów fizycznych na potrzeby systemów interaktywnych
Pojęcie „interaktywny” zazwyczaj odnosi się do możliwości wchodzenia człowieka w interakcje z maszyną w oparciu o informacje wizualne i słuchowe. Jeśli chodzi o zmysł dotyku, nie znaleziono jeszcze sposobu na pełne wykorzystanie jego potencjału w technologiach haptycznych i innych zastosowaniach. Jest to jednak funkcja mająca coraz większe znaczenie dla projektowania wciągających doświadczeń oferowanych przez aplikacje rzeczywistości wirtualnej i rozszerzonej. Niestety, brakuje wiedzy na temat percepcyjnej integracji bodźców dotykowych, w tym tarcia, temperatury lub wibracji. W związku z tym zespół finansowanego przez Europejską Radę ds. Badań Naukowych projektu TANGO zamierza podejść do problemu wielozmysłowego renderowania obiektów fizycznych w sposób holistyczny poprzez badanie wielowymiarowych technik haptycznych, ostrości wrażeń dotykowych i jej psychofizycznych wymiarów oraz mechanizmów integracji wielozmysłowej. Ponadto badania te uwzględnią takie istotne aspekty, jak starzenie się czy upośledzenie percepcji.
Cel
Current interactive systems provide realistic audio-visual feedback while haptic feedback is limited even though haptic interactions with devices are essential and touch plays a large role to convey immersive sensations. Thus, usable high-fidelity haptic rendering has the potential to improve interactions with interactive interfaces and future metaverses. Knowledge has started emerging on haptic rendering and multisensory perception of tangible objects. Still, combining multiple techniques to stimulate the full bandwidth of tactile sensitivity remains a hard challenge and little is known about the perceptual integration of tactile cues such as friction, temperature, or vibrations. Thus, there is the intricate twofold challenge of developing new haptic techniques based on models of cognitive multisensory integration whose investigation requires advanced stimulation techniques. Thus, the originality of TANGO is to address the problem of multisensory rendering of tangible objects from a holistic view by considering simultaneously multi-dimensional haptic techniques, tactile acuity across its psychophysical dimensions, and mechanisms of multisensory integration. Specifically, TANGO aims to 1/ characterize typical gestures and contact mechanics during interaction with real objects. 2/ understand how gestures and the dimension of haptic feedback influence perception of simulated tactile objects 3/ create a computational model of multisensory integration that outputs perceived realism during interaction with objects. Studies will also consider two main population factors: age and sensory impairment. Finally, the outcome from 1-3 will serve to design sensorily rich tangible 3D elements on displays, in virtual reality, and on maps for visually impaired. By a strongly interdisciplinary approach combining haptics, computer science, and neuroscience, TANGO will optimize haptic rendering in multisensory interactive interfaces to enhance its use in human-computer interactions.
Dziedzina nauki
Słowa kluczowe
Program(-y)
- HORIZON.1.1 - European Research Council (ERC) Main Programme
Temat(-y)
System finansowania
HORIZON-ERC - HORIZON ERC GrantsInstytucja przyjmująca
75794 Paris
Francja