71 подписчик

Аудио-визуальный перфоманс в реальном времени.

AnimateDiff в Comfy генерит визуал, который затем воспроизводится в Touch Designer с реагированием на аудио. Дальше всё это в реалтайме идёт в Notch для 3D композинга и эффектов, а лазеры и проекция управляются в Touch Designer.

Софт:

• ComfyUI (StableDiffusion, AnimateDiff, IP Adapter, кастомные моушн лоры, разные контролнеты, аннотаторы, Depth Map LoRA, интерполяция кадров в FILM)

• Notch (для генерации начального Ч/Б видео и реалтаймового 3D композинга)

• TouchDesigner (для обработки сигналов от системы, MIDI и игрового контроллера, распознавания бита, плейбека, контроля света DMX, контроля лазеров ILDA, хранения пресетов, recall)

• Ableton (для управления шоу)

• Max MSP (для кастомных устройств Ableton)

Железо:

• 4090 PC (для генерации в AnimateDiff)

• 3090 SFF PC (комп для генерации контента в реальном времени)

• Epson L530U Projector

• LaserCube 7.5w Ultra

• Ableton Push

• Midi Fighter Twister

• 8BitDo Pro 2 Controller

• Elgato StreamDeck

• Focusrite Scarlett 4i4

Твит

Аудио-визуальный перфоманс в реальном времени. AnimateDiff в Comfy генерит визуал, который затем воспроизводится в Touch Designer с реагированием на аудио.

02:01

Около минуты

5 июля