Description du projet
Un rendu audio personnalisé pour les applications de réalité étendue
La réalité étendue (XR pour «extended reality») enrichit le monde physique d’interactions numériques en temps réel. Contrairement aux éléments visuels, le son dans les applications XR tend à manquer de réalisme et d’accessibilité. Une étude a révélé que 97 % des applications XR négligent le rendu sonore personnalisé en raison de sa complexité. Soutenu par le programme Actions Marie Skłodowska-Curie, le projet MIA met au point une solution de rendu audio qui combine les avancées en psychoacoustique avec une IA explicable. Le projet créera un prototype alimenté par l’IA pour des expériences audio personnalisées et fournira une boîte à outils avec un matériel minimal pour une intégration audio harmonieuse dans les applications XR. En outre, le projet s’intéressera aux mesures de protection pour le développement de produits européens, contribuant à l’inclusion numérique, en particulier dans le domaine du travail à distance et de l’assistance auditive.
Objectif
The growing field of extended reality (XR) has shown how technology can expand the physical world with real-time digital information and interactions through applications spanning from hybrid meetings to assisted hearing. While plausible visual information is easily delivered, when not adapted to each user, generic sound rendering lacks realism, increases cognitive load and limits accessibility. Still, a recent study found that only 97% of analysed applications ignore personalised sound rendering due to its complex acoustic requirements.
MIA (Modelling Individual Acoustics for plausible extended realities) aims at individualising audio rendering by developing a widely adoptable solution that leverages advancements in psychoacoustics and explainable artificial intelligence (AI). The proposed research effort will (1) explore and determine requirements across multiple acoustic contexts, (2) prototype an explainable AI model to infer individual audio characteristics, and (3) implement a personalisation procedure based on user actions to guarantee plausibility over specific contexts.
The resulting software solution aims to provide a toolkit with minimal hardware requirements to integrate plausible audio in XR applications. MIA will foster open-science practices while exploring protection measures for EU product development, supporting the EU's goals of advancing technological innovation and enhancing digital inclusion, particularly in remote work, education, and hearing assistance technologies. To succeed, MIA integrates the diverse fields of expertise of the researcher on auditory modelling and advanced Bayesian statistics, of the host institution on audio-signal processing and XR applications, and of the secondment host on the development of explainable AI. The researcher will, therefore, have the chance to collaborate with multiple leading experts to expand his expertise and professional networks, supporting his development for an independent career.
Champ scientifique (EuroSciVoc)
CORDIS classe les projets avec EuroSciVoc, une taxonomie multilingue des domaines scientifiques, grâce à un processus semi-automatique basé sur des techniques TLN. Voir: Le vocabulaire scientifique européen.
CORDIS classe les projets avec EuroSciVoc, une taxonomie multilingue des domaines scientifiques, grâce à un processus semi-automatique basé sur des techniques TLN. Voir: Le vocabulaire scientifique européen.
Vous devez vous identifier ou vous inscrire pour utiliser cette fonction
Mots‑clés
Les mots-clés du projet tels qu’indiqués par le coordinateur du projet. À ne pas confondre avec la taxonomie EuroSciVoc (champ scientifique).
Les mots-clés du projet tels qu’indiqués par le coordinateur du projet. À ne pas confondre avec la taxonomie EuroSciVoc (champ scientifique).
Programme(s)
Programmes de financement pluriannuels qui définissent les priorités de l’UE en matière de recherche et d’innovation.
Programmes de financement pluriannuels qui définissent les priorités de l’UE en matière de recherche et d’innovation.
-
HORIZON.1.2 - Marie Skłodowska-Curie Actions (MSCA)
PROGRAMME PRINCIPAL
Voir tous les projets financés dans le cadre de ce programme
Thème(s)
Les appels à propositions sont divisés en thèmes. Un thème définit un sujet ou un domaine spécifique dans le cadre duquel les candidats peuvent soumettre des propositions. La description d’un thème comprend sa portée spécifique et l’impact attendu du projet financé.
Les appels à propositions sont divisés en thèmes. Un thème définit un sujet ou un domaine spécifique dans le cadre duquel les candidats peuvent soumettre des propositions. La description d’un thème comprend sa portée spécifique et l’impact attendu du projet financé.
Régime de financement
Régime de financement (ou «type d’action») à l’intérieur d’un programme présentant des caractéristiques communes. Le régime de financement précise le champ d’application de ce qui est financé, le taux de remboursement, les critères d’évaluation spécifiques pour bénéficier du financement et les formes simplifiées de couverture des coûts, telles que les montants forfaitaires.
Régime de financement (ou «type d’action») à l’intérieur d’un programme présentant des caractéristiques communes. Le régime de financement précise le champ d’application de ce qui est financé, le taux de remboursement, les critères d’évaluation spécifiques pour bénéficier du financement et les formes simplifiées de couverture des coûts, telles que les montants forfaitaires.
HORIZON-TMA-MSCA-PF-EF - HORIZON TMA MSCA Postdoctoral Fellowships - European Fellowships
Voir tous les projets financés dans le cadre de ce programme de financement
Appel à propositions
Procédure par laquelle les candidats sont invités à soumettre des propositions de projet en vue de bénéficier d’un financement de l’UE.
Procédure par laquelle les candidats sont invités à soumettre des propositions de projet en vue de bénéficier d’un financement de l’UE.
(s’ouvre dans une nouvelle fenêtre) HORIZON-MSCA-2024-PF-01
Voir tous les projets financés au titre de cet appelCoordinateur
La contribution financière nette de l’UE est la somme d’argent que le participant reçoit, déduite de la contribution de l’UE versée à son tiers lié. Elle prend en compte la répartition de la contribution financière de l’UE entre les bénéficiaires directs du projet et d’autres types de participants, tels que les participants tiers.
SW7 2AZ London
Royaume-Uni
Les coûts totaux encourus par l’organisation concernée pour participer au projet, y compris les coûts directs et indirects. Ce montant est un sous-ensemble du budget global du projet.