Паралізований пацієнт створює музику силою думки завдяки нейроінтерфейсу

Користувач нейроінтерфейсу (BCI) Гелен Баквалтер навчився створювати музику силою думки. Про це він розповів в інтерв’ю Wired.

Пацієнт співпрацює з аспірантом Каліфорнійського технологічного інституту Шоном Дарсі. Дослідник створив алгоритм, який перетворює нейронні сигнали на звуки.

Баквалтер багато років є учасником лос-анджелеського панк-гурту Siggy. Частину згенерованих аудіофрагментів він використав у треку Wirehead.

«Ще до імплантації я побачив на YouTube ролик про гриби: якщо до них підключити електроди, можна почути їхні звуки.[…] Я подумав: якщо гриб може “пищати”, я хочу дізнатися, як звучить мій мозок. З першого дня ми говорили про це з дослідниками, і аспірант Шон Дарсі розробив софт, який перекладає думки в керування звуком», — прокоментував Баквалтер.

Дослідники визначають нейрони, якими пацієнт може свідомо керувати, і призначають кожному з них певний тон. Під час активації клітини висота звуку зростає.

Поки що Баквалтер здатен відтворювати одночасно два тони.

«У перспективі я бачу цілий DJ-пульт у себе в голові: можна створювати ритми і накладати мелодії», — зазначив він.

Звук з’являється в момент, коли активність нейрона перевищує певний поріг. Щоб його створити, достатньо подумати про рух. Для вимкнення потрібно сильніше зосередитися.

Баквалтер має квадриплегією через невдалий стрибок у воду в 16 років. У 2024 році він погодився на операцію на мозку для встановлення BCI в межах дослідження Каліфорнійського технологічного інституту.

У мозку Баквалтера розміщено шість чипів компанії Blackrock Neurotech. Вони зчитують активність нейронів і розшифровують наміри щодо дій. Система дозволяє керувати комп’ютером силою думки, повертати чутливість пальцям, а віднедавна — і створювати музику.

Інші носії BCI також використовують імплантати для створення об’єктів цифрового мистецтва. У 2023 році на виставці Американської асоціації сприяння розвитку науки у Вашингтоні свої роботи представили Натан Коупленд, Джеймс Джонсон та Ян Шойерман.

Нагадаємо, у березні команда професора Сюй Гуанхуа створила спосіб керування собакою-роботом силою думки.