Klasycznego rocka można odczytać z aktywności mózgu

Klasyczną muzykę rockową, na przykład zespołu Pink Floyd, można odtworzyć na podstawie zarejestrowanej aktywności mózgu – podało pismo „PLOS Biology”.

masz / pap
masz / pap
Udostępnij artykuł:
Klasycznego rocka można odczytać z aktywności mózgu
fot. Shutterstock.com

Zespół Ludovica Belliera z University of California w Berkeley (USA) wykazał, że możliwe jest zrekonstruowanie rozpoznawalnych wersji klasycznej muzyki rockowej zespołu Pink Floyd na podstawie badania aktywności kory słuchowej mózgu - zarejestrowanej podczas słuchania utworu przez 29 pacjentów z wszczepionymi do czaszki elektrodami.

Autorzy wykorzystali modelowanie nieliniowe do odkodowania aktywności mózgu i zrekonstruowania piosenki „Another Brick in the Wall, Part 1”. Wcześniejsze badania wykazały, że modelowanie komputerowe może być wykorzystywane do dekodowania i rekonstrukcji mowy, ale brakuje modelu muzyki, który uwzględniałby takie elementy, jak wysokość tonu, melodia, harmonia i rytm, a także różne obszary sieci przetwarzania dźwięku w mózgu.

Zespołowi z UC Berkeley udało się stworzyć taki model, stosując nieliniowe dekodowanie aktywności mózgu zarejestrowanej za pomocą 2668 elektrod, umieszczonych bezpośrednio na mózgach 29 pacjentów, którzy następnie słuchali klasycznego rocka.

Aktywność mózgu rejestrowana przez 347 elektrod była specyficznie związana z muzyką – chodziło zwłaszcza o trzy regiony mózgu: zakręt skroniowy górny (Superior Temporal Gyrus, STG), korę czuciowo-ruchową (Sensory-Motor Cortex, SMC) oraz zakręt czołowy dolny (IFG).

Analiza elementów utworu ujawniła w STG wyjątkowy region, który reprezentuje rytm, w tym przypadku rytm gitary w muzyce rockowej. Aby dowiedzieć się, które regiony i które elementy utworu były najważniejsze, zespół przeprowadził analizę rekonstrukcji po usunięciu różnych danych a następnie porównywali rekonstrukcję z pierwotnym utworem. Z anatomicznego punktu widzenia największy wpływ na jakość rekonstrukcji miało usunięcie elektrod z prawego STG.

Uzyskane informacje mogą mieć wpływ na interfejsy mózg-maszyna, takie jak implanty przywracające słuch. W przypadku tych urządzeń nadal wiele jest do zrobienia, jeśli chodzi o rozpoznawanie rytmu i melodii mowy oraz jej prozodii (zbiorcze określenie obejmujące takie brzmieniowe właściwości mowy, jak akcent, intonacja i iloczas).

Author widget background

PRACA.WIRTUALNEMEDIA.PL

NAJNOWSZE WIADOMOŚCI

"To się skończy linczem". Cienkowska wyjaśniła, dlaczego nie ma otwartych konkursów w TVP

"To się skończy linczem". Cienkowska wyjaśniła, dlaczego nie ma otwartych konkursów w TVP

Znowu to zrobili. Oslo tym razem reklamuje się musicalem

Znowu to zrobili. Oslo tym razem reklamuje się musicalem

Temu z największą liczbą reklam na Facebooku i Instagramie. Biedronka liderem zasięgu, reklama drożeje

Temu z największą liczbą reklam na Facebooku i Instagramie. Biedronka liderem zasięgu, reklama drożeje

Trzy nowe kanały telewizyjne za darmo w streamingu

Trzy nowe kanały telewizyjne za darmo w streamingu

Więcej niż nazwa. Partnerstwo, które zmienia Arenę
Materiał reklamowy

Więcej niż nazwa. Partnerstwo, które zmienia Arenę

Serwis nowego właściciela TVN podnosi ceny. Pierwsza taka decyzja po transakcji

Serwis nowego właściciela TVN podnosi ceny. Pierwsza taka decyzja po transakcji