Słuchowe stany emocjonalne
Wyobraźmy sobie otrzymywanie informacji zwrotnej od urządzenia mówiącego o tym, w jaki sposób nasze emocje i stan poznawczy wpływają na odruchy fizjologiczne i odpowiedź adaptacyjną dla poprawy naszego dobrostanu. Naukowcy zaprojektowali taki system przez zastosowanie technologii BNCI w budowie nowego elektronicznego instrumentu muzycznego. Umożliwił to finansowany przez UE projekt B-REACTABLE (B-reactable: Multimodal tabletop system for collaborative physiology monitoring and training). Instrument Reactable, opracowany poprzednio na Uniwersytecie Pompeu Fabra w Barcelonie, wyposażony jest w blat muzyczny z dotykowym interfejsem oraz podświetlany wyświetlacz pokrywający powierzchnię płyty instrumentu. Ten dostępny komercyjnie system umożliwia tworzenie muzyki bez list tekstowych i nieskończenie długich konfiguracyjnych menu. Dotykowe podzespoły są innymi modułami syntezatora analogowego, które mogą być zestawiane razem, by tworzyć dźwięki lub komponować muzykę. Badacze wykorzystali podzespoły dotykowe, by umożliwić użytkownikom monitorowanie i modyfikowanie ich stanów fizjologicznych w oparciu o informację zwrotną na temat stanu poznawczego i emocjonalnego. Kluczem do sukcesu jest efektywna sonifikacja elektroencefalogramu (EEG) lub transformacja sygnału EEG na sygnał słuchowy. Nie jest to zadanie proste, gdyż konieczny jest przekład zależności w EEG na dźwięki, które będą dla ludzi zrozumiałym przekazem. Zespół badawczy przeprowadził dokładną analizę dostępnego piśmiennictwa na temat sonifikacji EEG oraz dodatkowe doświadczenia, co doprowadziło do wyselekcjonowania opartego na modelu podejścia do sonifikacji EEG. Do testów wybrano 21-kanałowe urządzenie do EEG. W końcowym roku projektu naukowcy przetestowali prototyp B-REACTABLE z pomocą niezapoznanych z technologią użytkowników i profesjonalnych DJ-ów Reactable. Jednocześnie zespół opracował nowy paradygmat dla potrzeb szkolenia w zakresie treningu współczucia w oparciu o neurologiczne sprzężenie zwrotne. W tym celu wykorzystano opracowane wcześniej sonifikacje do monitorowania czynności EEG. Sonifikacje połączono z prezentacją emocjonalnych filmów wideo do szkolenia użytkowników w zakresie prospołecznego współczucia. Do szerszych zastosowań tych technologii należy platforma wirtualna łącząca artystów i naukowców pracujących nad mediami multisensorycznymi i reakcjami fizyczno-emocjonalnymi na treści audiowizualne. Biorąc pod uwagę ogrom mediów audiowizualnych dostępnych bezpłatnie lub płatnie w internecie przeznaczonych do telefonów komórkowych i innych urządzeń przenośnych, potencjał rynkowy jest olbrzymi. Oczekuje się, że system B-REACTABLE będzie bardzo przydatnym narzędziem do szkolenia specjalistów w zakresie ochrony zdrowia i pomoże podnieść jakość życia obywateli UE. Zdolność kontrolowania i monitorowania własnych sygnałów fizjologicznych poprzez informacje zwrotne na temat kondycji poznawczej i emocjonalnej może wkrótce przekazać pacjentom kontrolę nad własnym leczeniem.
Słowa kluczowe
Emocjonalny, interakcja mózg-układ nerwowy, słuchowy, szkolenie behawioralne, Reactable, EEG
