С каждым днём нейросети всё плотнее входят в нашу жизнь, облегчая задачи программистам, копирайтерам, музыкантам, дизайнерам и художникам. Креативное web 3.0 агентство FMT.JETLAG совместно с «Дзеном» использовали нейросети для визуализации треков популярных российских исполнителей.
Сперва авторы блогов «Тима Слухает», «а можно потанцевальней?», Tyurinovich, Encore и Motherland вместе с журналисткой Яной Динамикой выбрали самые значимые музыкальные композиции 2022 года для визуализации. Внимание уделили не только популярным артистам, но и новым именам в музыкальной индустрии. Остановили свой выбор на Мумий Тролле, Pharaoh, Тосе Чайкиной, Feduk, Zoloto, Куоке и других музыкантах. Машинный разум изучил отрывки из предложенных песен и сгенерировал изображения на их основе. После этого из картинок создали короткий видеоряд, позволяющий по-новому прочувствовать музыку.
Из трека Мумий Тролля и hehehe «Корюшка», получился абстрактный красочный клип: сперва из хаоса фигур и штрихов появляются затаившиеся в толще воды рыбы, небрежно написанные в стиле Мишеля Баскии, затем их сменяют ярко-красные цветы, а после на их месте возникают снежинки и стволы заснеженных деревьев. «Придуманная» нейросетью визуализация подчеркнула многогранность и контрастность песни о северном лете.
«I Knew It» СОЮЗа и Kate NV нейросеть отобразила в виде полных светлой ностальгии картин залитого Солнцем, пригрезившегося во сне города. На фразе «Я – это время» из воздуха возникает циферблат волшебных часов, напоминающий о скоротечности и необратимости времени. Песню «Ближе» от Zoloto и Тоси Чайкиной машинный разум тоже показал в виде города, но совсем другого: ночь, здания поднимаются до небес, пространство вокруг них соткано из капель дождя и отблесков уличных фонарей, и всё это – лишь декорации для влюблённых, обнимающих друг друга под слова «ты не одна». Песню «Город несбывшихся надежд» от Feduk нейросеть также проиллюстрировала городскими видами: крышами-пагодами, полупустыми квартирами, узкими японскими улочками и затерявшимися где-то среди них одинокими фигурами в стиле анимэ.
Машинный разум совместно с артистами из JETLAG придали индивидуальный запоминающийся визуальный стиль каждой песне. Одинокая фигура в капюшоне блуждает по не безопасному городу неоновых вывесок под песню Куока «Метаморфозы»; чёрно-белый заполненный дымом клип становится ярким и цветным после появления любимой (кем или чем бы она ни была) в «Сонате Ей» от Pharaoh.
«Сироту» Диктофона нейросеть изобразила в виде чёрно-белой меланхоличной северо-европейской природы, а лес, полный сюрреалистичных угловатых стеклянных аквариумов, причудливо отразил настроение трека «Небезопасно» от passmurny. Хорошо нейросеть справилась не только с мечтательными, но и с тёмными полными безнадёжности сюжетами: лес из чёрно-белых гитарных риффов, рок-музыканты, врачи в масках и вымазанные кровью больничные палаты под «Нет Души от KICKROX» и ещё более мрачные и абстрактные готичные образы под песню «Темнота» от Asenssia & VSN7.
Посмотреть короткие клипы можно на «Дзене» по ссылке.