Opis projektu
Spersonalizowane renderowanie dźwięku dla aplikacji rzeczywistości rozszerzonej
Rzeczywistość rozszerzona (ang. extended reality, XR) wzbogaca świat fizyczny o cyfrowe interakcje w czasie rzeczywistym. W przeciwieństwie do elementów wizualnych dźwięk w aplikacjach XR cechuje się brakiem realizmu i słabą dostępnością. Badanie wykazało, że 97 % aplikacji XR nie oferuje możliwości spersonalizowanego renderowania dźwięku z powodu jego złożoności. Z tego względu zespół projektu MIA, wspieranego w ramach programu działań „Maria Skłodowska-Curie, postanowił opracować rozwiązanie do renderowania dźwięku, które łączy najnowsze osiągnięcia w dziedzinie psychoakustyki z wyjaśnialną sztuczną inteligencją (AI). Projekt obejmie prace nad prototypem opartym na AI umożliwiającym spersonalizowane doświadczenia audio i zestawem narzędzi z minimalnymi wymogami sprzętowymi do płynnej integracji dźwięku z aplikacjami XR. Ponadto zespół projektu zamierza przyjrzeć się bliżej możliwości wprowadzenia środków ochronnych na potrzeby rozwoju produktów w UE, wspierając procesy włączenia cyfrowego, szczególnie w zakresie pracy zdalnej i technologii wspomagania słuchu.
Cel
The growing field of extended reality (XR) has shown how technology can expand the physical world with real-time digital information and interactions through applications spanning from hybrid meetings to assisted hearing. While plausible visual information is easily delivered, when not adapted to each user, generic sound rendering lacks realism, increases cognitive load and limits accessibility. Still, a recent study found that only 97% of analysed applications ignore personalised sound rendering due to its complex acoustic requirements.
MIA (Modelling Individual Acoustics for plausible extended realities) aims at individualising audio rendering by developing a widely adoptable solution that leverages advancements in psychoacoustics and explainable artificial intelligence (AI). The proposed research effort will (1) explore and determine requirements across multiple acoustic contexts, (2) prototype an explainable AI model to infer individual audio characteristics, and (3) implement a personalisation procedure based on user actions to guarantee plausibility over specific contexts.
The resulting software solution aims to provide a toolkit with minimal hardware requirements to integrate plausible audio in XR applications. MIA will foster open-science practices while exploring protection measures for EU product development, supporting the EU's goals of advancing technological innovation and enhancing digital inclusion, particularly in remote work, education, and hearing assistance technologies. To succeed, MIA integrates the diverse fields of expertise of the researcher on auditory modelling and advanced Bayesian statistics, of the host institution on audio-signal processing and XR applications, and of the secondment host on the development of explainable AI. The researcher will, therefore, have the chance to collaborate with multiple leading experts to expand his expertise and professional networks, supporting his development for an independent career.
Dziedzina nauki (EuroSciVoc)
Klasyfikacja projektów w serwisie CORDIS opiera się na wielojęzycznej taksonomii EuroSciVoc, obejmującej wszystkie dziedziny nauki, w oparciu o półautomatyczny proces bazujący na technikach przetwarzania języka naturalnego. Więcej informacji: Europejski Słownik Naukowy.
Klasyfikacja projektów w serwisie CORDIS opiera się na wielojęzycznej taksonomii EuroSciVoc, obejmującej wszystkie dziedziny nauki, w oparciu o półautomatyczny proces bazujący na technikach przetwarzania języka naturalnego. Więcej informacji: Europejski Słownik Naukowy.
Aby użyć tej funkcji, musisz się zalogować lub zarejestrować
Przepraszamy… podczas wykonywania operacji wystąpił nieoczekiwany błąd.
Wymagane uwierzytelnienie. Powodem może być wygaśnięcie sesji.
Dziękujemy za przesłanie opinii. Wkrótce otrzymasz wiadomość e-mail z potwierdzeniem zgłoszenia. W przypadku wybrania opcji otrzymywania powiadomień o statusie zgłoszenia, skontaktujemy się również gdy status ulegnie zmianie.
Słowa kluczowe
Słowa kluczowe dotyczące projektu wybrane przez koordynatora projektu. Nie należy mylić ich z pojęciami z taksonomii EuroSciVoc dotyczącymi dziedzin nauki.
Słowa kluczowe dotyczące projektu wybrane przez koordynatora projektu. Nie należy mylić ich z pojęciami z taksonomii EuroSciVoc dotyczącymi dziedzin nauki.
Program(-y)
Wieloletnie programy finansowania, które określają priorytety Unii Europejskiej w obszarach badań naukowych i innowacji.
Wieloletnie programy finansowania, które określają priorytety Unii Europejskiej w obszarach badań naukowych i innowacji.
-
HORIZON.1.2 - Marie Skłodowska-Curie Actions (MSCA)
GŁÓWNY PROGRAM
Wyświetl wszystkie projekty finansowane w ramach tego programu
Temat(-y)
Zaproszenia do składania wniosków dzielą się na tematy. Każdy temat określa wybrany obszar lub wybrane zagadnienie, których powinny dotyczyć wnioski składane przez wnioskodawców. Opis tematu obejmuje jego szczegółowy zakres i oczekiwane oddziaływanie finansowanego projektu.
Zaproszenia do składania wniosków dzielą się na tematy. Każdy temat określa wybrany obszar lub wybrane zagadnienie, których powinny dotyczyć wnioski składane przez wnioskodawców. Opis tematu obejmuje jego szczegółowy zakres i oczekiwane oddziaływanie finansowanego projektu.
System finansowania
Program finansowania (lub „rodzaj działania”) realizowany w ramach programu o wspólnych cechach. Określa zakres finansowania, stawkę zwrotu kosztów, szczegółowe kryteria oceny kwalifikowalności kosztów w celu ich finansowania oraz stosowanie uproszczonych form rozliczania kosztów, takich jak rozliczanie ryczałtowe.
Program finansowania (lub „rodzaj działania”) realizowany w ramach programu o wspólnych cechach. Określa zakres finansowania, stawkę zwrotu kosztów, szczegółowe kryteria oceny kwalifikowalności kosztów w celu ich finansowania oraz stosowanie uproszczonych form rozliczania kosztów, takich jak rozliczanie ryczałtowe.
HORIZON-TMA-MSCA-PF-EF - HORIZON TMA MSCA Postdoctoral Fellowships - European Fellowships
Wyświetl wszystkie projekty finansowane w ramach tego programu finansowania
Zaproszenie do składania wniosków
Procedura zapraszania wnioskodawców do składania wniosków projektowych w celu uzyskania finansowania ze środków Unii Europejskiej.
Procedura zapraszania wnioskodawców do składania wniosków projektowych w celu uzyskania finansowania ze środków Unii Europejskiej.
(odnośnik otworzy się w nowym oknie) HORIZON-MSCA-2024-PF-01
Wyświetl wszystkie projekty finansowane w ramach tego zaproszeniaKoordynator
Kwota netto dofinansowania ze środków Unii Europejskiej. Suma środków otrzymanych przez uczestnika, pomniejszona o kwotę unijnego dofinansowania przekazanego powiązanym podmiotom zewnętrznym. Uwzględnia podział unijnego dofinansowania pomiędzy bezpośrednich beneficjentów projektu i pozostałych uczestników, w tym podmioty zewnętrzne.
SW7 2AZ London
Zjednoczone Królestwo
Ogół kosztów poniesionych przez organizację w związku z uczestnictwem w projekcie. Obejmuje koszty bezpośrednie i pośrednie. Kwota stanowi część całkowitego budżetu projektu.