Блестящий экспериментатор Элвин Люсье скончался в 2021 году. Теперь его церебральные органоиды создают музыку.
Последние два десятилетия я занимался сочинением и исследованием различных форм алгоритмической музыки. Термин «алгоритмическая музыка» — это широкая категория. Он просто означает, что хотя бы какой-то аспект композиции создаётся набором правил или процедур, а не рождается напрямую из сердца и разума композитора.
Идея сочинять музыку по набору правил существует по меньшей мере с 1026 года, когда Гвидо д’Ареццо, изобретатель нотной записи, разработал систему преобразования текста в музыку. Возможно, самым известным примером композиции на основе правил является «Музыкальная игра в кости» Моцарта (Musikalisches Würfelspiel), в которой он применяет элемент случайности для создания музыкальных произведений.
Современная эпоха компьютерной генерации и компьютерной поддержки композиции началась в 1957 году с Illiac Suite Лежарена Хиллера и Леонарда Айзексона. С появлением вычислительной мощности возник целый спектр техник, включая трансляционные модели (предвосхищённые д’Ареццо), математические модели, системы, основанные на знаниях, и эволюционные модели. Неудивительно, что нынешняя передовая линия алгоритмической музыки сосредоточена вокруг возможностей и мощи искусственного интеллекта.
И вот, благодаря сотрудничеству художников и учёных, это направление искусства внезапно сделало дикий скачок в совершенно новом направлении.
Элвин Люсье
Американский композитор Элвин Люсье был знаковой фигурой в мире экспериментальной музыки. Как звуковой художник, он стал пионером того, что мы могли бы назвать «композицией на основе акустических феноменов». Его правила для создания музыки в значительной степени выводились из свойств звука, пространства и самого сознания.
Получив классическое образование, Люсье во время пребывания в Италии по программе Фулбрайта познакомился с работами авангардного композитора Джона Кейджа. По его собственным словам:
«Я пошёл на концерт в оперный театр Ла Фениче. Джон Кейдж поднялся с роялем, а Дэвид Тюдор прошёл по проходу прямо под роялем, ударил его тростью и сказал: "Теперь я — композитор." Джон Кейдж был сумасшедшим. Это был первый раз в жизни, когда американец учил европейцев чему-то новому. Всё, чему меня учили до этого, было связано с Бартоком или Шубертом. И вдруг — американский композитор, который давал пищу для размышлений другим композиторам! Это было невероятно вдохновляюще… Джон Кейдж был смешным, это было освежающе и прекрасно.»
Этот опыт открыл его разум для новых возможностей того, чем может быть музыка. Люсье начал воспринимать акт сочинения не просто как результат осознанной и продуманной записи нот, а как исследование восприятия, резонанса и звуковых феноменов вообще.
Наиболее известная и, пожалуй, самая знаковая работа Люсье — это его произведение 1969 года I Am Sitting in a Room (Я сижу в комнате). Оно представляет собой запись, где он сидит в комнате и описывает, как будет многократно воспроизводить запись в этом же помещении, пока звуковые волны не разложатся в форму, представляющую собой «естественные резонансные частоты комнаты, выраженные речью».
Ранее, в 1965 году, он создал Music for Solo Performer (Музыка для сольного исполнителя), в котором его усиленные мозговые волны управляли ударными инструментами. Это была радикальная идея как с точки зрения звука, так и концепции. Исполнение представляло собой слияние разума и машины, исполнителя и инструмента.
Music for Solo Performer также ввела концепцию Люсье о композиции как «когнитивном труде». В каком-то пророческом смысле это предвосхитило его последний экспериментальный музыкальный проект.
Сотрудничество: Воскрешение
Художник и исследователь Гай Бен-Ари работает в лаборатории биологического искусства SymbioticA при Университете Западной Австралии. В 2012 году он получил грант на разработку первого нейронного синтезатора. Вдохновлённый работами Люсье, он задумал использовать свои собственные кожные клетки для создания стволовых клеток, которые затем можно было бы превратить в нейроны. Полученная нейронная сеть жила в чашке Петри и могла взаимодействовать с аналоговыми синтезаторами, а также получать сигналы от живого барабанщика. Проект, созданный в сотрудничестве с несколькими художниками и нейробиологом, был представлен в 2015 году под названием cellF.
Люсье узнал о cellF и был настолько заинтригован, что пригласил команду выступить с ним в Санкт-Петербурге в 2018 году. Увы, выступление пришлось отменить из-за травмы Люсье при падении. Они перенесли мероприятие на 2020 год в Нью-Йорке, но затем пришла пандемия.
Во время вынужденного перерыва они начали сотрудничать через видеовстречи, чтобы разработать и построить «биологического дублёра-исполнителя» для Люсье — исполнителя, который бы почитал его творчество и пережил его земную жизнь. В команде были также мультидисциплинарные художники Натан Томпсон и Мэтт Гингольд, а также нейробиолог Стюарт Ходжеттс. Проект получил название Revivification (Воскрешение).
К 2020 году Люсье было уже 89 лет. Команда не могла собраться лично, но, не теряя времени, и, возможно, предчувствуя сокращающееся время, он пожертвовал свою кровь для проекта. Кровь отправили в Гарвардскую медицинскую школу, где при помощи технологии индуцированных плюрипотентных стволовых клеток его белые кровяные тельца были перепрограммированы в стволовые клетки.
Затем командой были созданы так называемые «церебральные органоиды» — трёхмерные структуры, напоминающие развивающиеся структуры человеческого мозга. Они могут поддерживаться in vitro в течение многих лет.
Для реализации проекта команде потребовалось создать простую в обслуживании систему жизнеобеспечения для живого органоида. Клетки размещались на сверхтонкой подвешенной сетке с 64 электродами, позволяющей органоиду постепенно оплетать крошечные провода по мере роста. С помощью специально разработанного программного обеспечения для электрофизиологии команда могла считывать и обрабатывать нейронные сигналы органоидов, а затем использовать их для управления электромеханическими актуаторами.
Результатом стала инсталляция, где органоид может «играть» на двадцати вручную изготовленных латунных пластинах, размещённых на стенах экспозиции. Более того, органоиды могут «слышать» результат своей игры через стратегически расположенные микрофоны, передающие обратную связь в виде нейронной стимуляции. Именно эта петля обратной связи придаёт непрерывной композиции черты эмерджентности: создаваемые звуки одновременно зависят от предыдущего вывода и остаются непредсказуемыми.
В отличие от искусственного интеллекта, Бен-Ари и его коллеги называют своё творение примером «ин витро интеллекта». Слово «интеллект» может быть натянутым, но кто знает? Несомненно, есть что-то интригующее в том, как органоид обрабатывает получаемую обратную связь.
Проект совершенно новый, и на данный момент не опубликовано ни одной научной статьи, подробно объясняющей алгоритмы, которые использовала команда для обработки сигналов на входе и выходе органоидов. Также пока нет полноценной аудиозаписи работы установки — существует только короткий отрывок, который можно услышать в видео Revivification ARS Electronica Submission Reel (аудио с 3:52 до 4:04).
Бен-Ари подчёркивает, что проект был реализован с «полным знанием и согласием Люсье». Семья Люсье продолжает оказывать поддержку проекту.
Кода
Revivification — это, несомненно, выдающийся синтез технологий, креативности, воображения и художественного поиска. Идея о том, что разум Элвина Люсье в каком-то смысле всё ещё сочиняет музыку, завораживает. В конце концов, именно его церебральные органоиды взаимодействуют с окружающей средой и производят звуки.
Однако я не могу отделаться от мысли, что настоящим испытанием «композиции после смерти» было бы создание органоидов из крови немузыканта. Звучала бы такая музыка иначе? А что если, скажем, создать органоиды из крови волнистого попугайчика — производила бы такая музыка характерно повторяющиеся мотивы?
Если вы хотите читать больше интересных историй, подпишитесь пожалуйста на наш телеграм канал: https://t.me/deep_cosmos