Видеогенерация 7 мин чтения ByteDance запустила Seedance 2.0 - мультимодальную платформу для генерации видео. Она создает 15-секундные ролики из текстовых описаний, изображений и аудио. Технология вызвала реакцию в медиаиндустрии. Для e-commerce она открывает новые возможности создания контента. Seedance 2.0 работает с четырьмя типами входных данных: текст, до 9 изображений, до 3 видеоклипов и до 3 аудиофайлов. Система генерирует видео в разрешении 2K с частотой до 60 FPS. Поддерживаются разные форматы: от квадратного 1:1 для социальных сетей до широкоэкранного 16:9. Платформа использует архитектуру диффузионного трансформера. Она совместно обрабатывает аудио и видео. Это обеспечивает естественность результата: персонажи двигаются по законам физики, а звук соответствует происходящему на экране. Seedance 2.0 открывает несколько направлений применения для владельцев e-commerce проектов: Вместо статичных фотографий можно создавать видео. Они показывают товар в действии. Например, одежду