69-річний дослідник-психолог Гален Бакволтер відкриває нову форму творчого самовираження, створюючи музику безпосередньо за допомогою мозкового імпланту. Паралізований від грудей вниз з 16 років, Бакволтер зголосився добровольцем для дослідження, проведеного в Caltech в 2024 році, з використанням шестичіпового нейронного інтерфейсу Blackrock Neurotech. Ціль полягала в тому, щоб зробити свій внесок у розробки, які могли б допомогти іншим людям з важкими формами інвалідності. Натомість він знайшов вихід для художньої творчості.
Технологія, відома як інтерфейс мозок-комп’ютера (BCI), швидко розвивається. Такі компанії, як Paradromics, Synchron та Neuralink, розробляють ці системи для відновлення руху та комунікації у людей із паралічем. Але Бакволтер демонструє, що BCI можуть вийти за рамки чисто відновлювальних додатків та увійти до абсолютно нових областей самовираження. Інші одержувачі мозкових імплантів використовували цю технологію для створення цифрового мистецтва.
Від Думки до Звуку
Працюючи з аспірантом Caltech Шоном Дерсі, Бакволтер розробив алгоритм, який перетворює його нейронну активність у музичні тони. Будучи фронтменом лос-анджелеської панк-групи Siggy протягом 29 років, Бакволтер інтегрував ці звуки, згенеровані розумом, у свій останній альбом Wirehead, випущений 15 березня.
Бакволтер пояснює цей процес як форму контрольованої активації нейронів. Імпланти містять 384 незалежні канали, які відстежують його мозкову активність. Зосередившись на певних рухах, таких як згинання або розгинання пальця ноги, може викликати відповідні тони. «Якщо я думаю про рух вказівним пальцем, а потім думаю про рух мізинцем, я можу робити це для будь-якої кількості каналів, над якими маю свідомий контроль», — каже він.
Система дозволяє йому маніпулювати висотою тону, свідомо активуючи чи пригнічуючи нейрони. Програмне забезпечення Дерсі включає віртуальну клавіатуру, для активації тонів якої потрібний стійкий рівень нейронного виведення, що створює відчуття гри на інструменті. В даний час він може відтворювати одночасно два тони, хоча вважає, що розширення цієї ємності можна досягти.
За Межами Відновлення: Сила Творчих Досліджень
Бакволтер наголошує на важливості врахування переваг користувачів у дослідженнях BCI. «Дослідники проводять свої експерименти і не завжди враховують, як зробити досвід цікавішим для людей, які ним користуються», — зазначає він. Він стверджує, що вивчення творчості необхідне довгострокового успіху технології.
“Я буду паралізованим до кінця своїх днів”, – говорить Бакволтер. «Але те, що це розширює мої творчі заняття… це чудово. Це так надихає — мати можливість робити унікальні речі». Його товариші по групі повністю підтримують його роботу, і досвід прослуховування тонів вперше був «приголомшливим».
Проект вже розширюється у бік створення повної пісні, згенерованої виключно з його нейронної активності, при цьому Дерсі виступає в ролі «регулятора ручок», щоб модулювати тони. Кінцева мета Бакволтера – створити повну діджейську установку, керовану виключно його думками.
«Це смілива нова територія», – пояснює Бакволтер. «Той факт, що я контролюю це, проявляється набагато виразніше в звуках. Коли я думаю про рух пальцем ноги, і раптом з’являється цей тон, це як… вау».
Робота Бакволтера підкреслює величезний потенціал BCI не тільки для відновлення функцій, але й для відкриття нових форм людського самовираження. Технологія виходить за рамки просто допомоги людям робити речі і переходить до того, щоб дозволити їм створювати речі способами, які раніше були немислимі.
