Добро пожаловать в нашу рубрику «ИИ-инструмент недели», где мы представляем вам различные инструменты. Хотите создавать невероятно качественные, реалистичные видеоролики из изображений, видео или даже просто текстовых запросов? Нет, я говорю не о Sora, а о RunwayML.
Конечно, OpenAI поразила нас своими демо-версиями, но у видео-ИИ Sora есть один существенный недостаток: в данный момент ее невозможно использовать. Когда это изменится, пока неясно, но ясно одно: уже существуют альтернативы, которые также могут генерировать впечатляющие видео, и наш номер один в этой области — RunwayML.
И Runway не только создает очень качественные видео, но и уже долгое время предлагает все новые и новые инновации и функции, и именно на это мы сейчас и посмотрим.
Как я могу использовать RunwayML и сколько это стоит?
RunwayML можно найти на сайте runwayml.com. Там мы можем, при желании, сначала спокойно осмотреться и просмотреть примеры. Существует также приложение для смартфонов, но пока только для iOS. Лично мне гораздо удобнее работать на компьютере, особенно в этой визуальной сфере.
Первый шаг — это создание бесплатной учетной записи, что можно сделать с помощью адреса электронной почты или учетной записи Google или Apple.
С каждой бесплатной учетной записью мы получаем 125 кредитов, которые мы можем использовать для создания видео.
Важная информация
Эти 125 кредитов не пополняются автоматически каждый месяц, как это бывает в некоторых других инструментах. После исчерпания 125 кредитов бесплатное использование прекращается. Однако с помощью этого стартового пакета мы все равно можем сгенерировать 25 секунд видео и таким образом попробовать, подходит ли нам Runway.
Если мы кратко взглянем на прайс-лист, то увидим первый тарифный план стоимостью 15 долларов в месяц при ежемесячной оплате, в рамках которого мы получаем 625 кредитов в месяц. Далее идет план за 35 долларов с 2250 кредитами, а в конце — безлимитный план за 95 долларов в месяц, который включает в себя неограниченное количество генераций и предназначен для опытных пользователей.
Вот и все формальности, теперь давайте посмотрим, как все это работает и что мы можем делать с помощью RunwayML.
Основные функции и возможности RunwayML
Создав учетную запись и войдя в Runway, мы сначала будем немного ошеломлены тем количеством возможностей, которые предлагает нам сайт.
Прокрутив немного вниз, мы найдем множество руководств от самой Runway по использованию отдельных инструментов, поэтому, если вас что-то конкретно интересует, обязательно загляните сюда. Еще ниже мы увидим примеры и работы других пользователей, где мы сможем просто полистать и почерпнуть вдохновение для собственных инструкций для ИИ.
Однако основная область применения Runway — это создание видео, и здесь у нас есть, по сути, две основные отдельные области с, возможно, немного сбивающими с толку названиями — Gen1 и Gen2. Несмотря на то, что может показаться, что одна версия старее и хуже, это не совсем так.
Runway Gen1 — Video-to-Video
Первая модель — это так называемый ИИ Video-to-Video. Проще говоря, мы загружаем видео и можем затем изменить его. При этом у нас есть возможность указать изображение для желаемого изменения стиля, выбрать стиль из ряда шаблонов, например, неоновый, или с помощью текстового ввода самостоятельно определить, как бы мы хотели изменить видео.
Независимо от того, какой способ мы выберем, ниже мы можем указать, насколько сильно мы хотим изменить исходное видео, а затем с помощью функции Preview Styles сгенерировать предварительный просмотр. Это отличная функция, поскольку предварительный просмотр не стоит нам ни одного кредита, и мы можем заранее увидеть, как будет выглядеть результат, при необходимости внести коррективы и только потом оплачивать кредитами создание реального видео, когда будем относительно уверены в результате.
Сгенерировав видео, мы, разумеется, можем его скачать. О правах и лицензиях мы еще кратко поговорим. В редакторе модели внизу слева мы также найдем пункт «Руководства» и сможем получить адресную помощь по тому разделу, в котором находимся в данный момент — это, на мой взгляд, очень продуманно, поскольку при первом использовании наверняка возникнет ряд вопросов, на которые можно будет получить ответы прямо в интерфейсе.
Runway Gen2 — Image-to-Video и Text-to-Video
Итак, это был Gen1, а в чем же разница с Gen2? Выбрав другую модель, мы быстро это увидим. В Gen2 мы можем создавать видео не из существующих видео, а либо из изображений, текстовых инструкций, либо из комбинации того и другого.
В остальном все работает примерно так же — у нас также есть возможность бесплатно создавать предварительные просмотры, а затем генерировать настоящее видео и тратить на него кредиты, когда мы будем относительно уверены в результате.
Примечание
Создание видео с помощью Gen2, кстати, обходится значительно дешевле, чем с помощью Gen1 — этот факт также может быть немаловажен при использовании бесплатных кредитов.
В общих настройках мы можем, если у нас есть платная подписка, убрать водяной знак и генерировать видео в более высоком разрешении, чем 720p.
В зависимости от типа создаваемого видео нам также доступны дополнительные инструменты. Если мы работаем без изображения-шаблона, то можем определить соотношение сторон, например, 16:9 или 1:1 для квадратного формата. В настройках камеры мы можем задать определенные движения камеры, например, масштабирование, движение в стороны, вверх или вниз, а также наклон, панорамирование или вращение.
Более точно определить движение мы можем, если будем использовать изображение и выберем так называемую Motion Brush. С ее помощью мы можем легко отметить области нашего изображения разными цветами, либо с помощью интеллектуальной поддержки выделения, либо просто закрасив изображение, а затем для каждого цвета с помощью ползунков сбоку задать движение, которое должно отображаться в конечном итоге.
Здесь мы также можем легко загрузить сгенерированное видео и увеличить его продолжительность до 3 раз по 4 секунды, хотя, честно говоря, нужно сказать, что при многократном увеличении продолжительности качество часто страдает.
Другие ИИ-инструменты в Runway
Если мы снова вернемся на главную страницу и нажмем на AI Tools, а затем на View all Tools, то увидим, что существует огромное количество других приложений, многие из которых связаны с обработкой изображений и видео, но есть, например, и Generative Audio для создания аудиофайлов или создания субтитров.
Некоторые из инструментов, такие как Color Grade, то есть цветокоррекция, можно использовать даже бесплатно, то есть нам не нужно тратить кредиты. Здесь можно даже скачать .cube-файл, если вы хотите использовать этот тип цветокоррекции самостоятельно — очень круто.
Редактор видеопроектов RunwayML
Отдельно хочется упомянуть пункт Video Editor Project, то есть видеопроекты, которые мы найдем здесь, на боковой панели. С бесплатным планом мы можем создать до трех таких проектов и получить, так сказать, собственный видеоредактор, в котором мы можем монтировать и редактировать сгенерированные клипы.
Там также есть несколько инструментов с поддержкой ИИ, например, с помощью функции Greenscreen мы можем легко выделить объект в видео и таким образом «вырезать» его и вставить в другое видео. Для этого нам также не нужны кредиты, и мы получаем довольно неплохое программное обеспечение для редактирования наших видео — при этом они не обязательно должны быть созданы в Runway, мы, разумеется, можем загружать и собственные материалы.
Все, что мы создали, мы всегда найдем в разделе Assets на левой боковой панели.
Как уже было сказано, можно часами говорить обо всех функциях, но я думаю, что теперь у нас есть неплохое общее представление для начала, и я хотел бы еще раз обратить ваше внимание на руководства от Runway по различным функциям, которые действительно хорошо сделаны и просты для понимания.
Лицензии и права на видео от Runway
Хорошая новость: весь контент, который мы создаем с помощью Runway, «принадлежит нам» и, следовательно, может без ограничений использоваться нами в некоммерческих и коммерческих целях. Нет никакой обязанности упоминать Runway при использовании контента. Однако, разумеется, в бесплатном плане на наших видео всегда будет водяной знак, указывающий на их происхождение. В платных тарифах этого уже нет, и мы можем делать с видео все, что захотим.
Загвоздка, которая в настоящее время есть практически у всех ИИ-инструментов в этой области, заключается в следующем: мы предоставляем RunwayML широкую лицензию на весь создаваемый контент, которая, с одной стороны, обеспечивает бесперебойную работу, но, с другой стороны, подразумевает, что другие пользователи могут видеть наш контент и использовать его для создания собственных видео. Это не мелочь, поскольку это позволяет третьим лицам легко копировать и адаптировать наш стиль и наши идеи.
Как всегда, напоминаем: по этому вопросу лучше всего всегда заглядывать в актуальные условия использования RunwayML, поскольку здесь часто что-то меняется, и информация из этого видео в будущем может устареть.
Целевая аудитория RunwayML
Создание видео с помощью ИИ — это, конечно, нишевая задача, и это приложение, которое нужно далеко не всем. Однако я бы рекомендовал каждому из вас воспользоваться 125 бесплатными кредитами, чтобы просто немного поэкспериментировать с Runway и составить собственное мнение о том, насколько хорошо это работает.
Платные тарифные планы, выходящие за рамки бесплатного, безусловно, ориентированы в первую очередь на создателей контента, а также на людей, которые работают с видео и, возможно, часто вынуждены ограничиваться ограниченным выбором стоковых видео для визуализации своих идей. Здесь, безусловно, кроется огромный потенциал, поскольку появляется возможность создавать видео практически из любого исходного материала.
Преимущества и недостатки RunwayML
✅ Преимущества
- Создание очень качественных видео с помощью искусственного интеллекта
- Бесплатная функция предварительного просмотра
- 125 бесплатных кредитов для ознакомления
- Постоянное внедрение новых функций и инноваций
- Огромный набор ИИ-инструментов для творческих людей
❌ Недостатки
- Видео не всегда идеальны (проблемы с движением, артефакты в видео)
- Бесплатные кредиты быстро заканчиваются
- Предоставление Runway широкой лицензии на создаваемый нами контент
Кто на самом деле стоит за Runway?
Runway — это американская компания, основанная в 2018 году Кристобалем Валенсуэлой, Алехандро Матамалой и Анастасисом Германидисом. Эти трое познакомились в Tisch School of the Arts Нью-Йоркского университета, высшем учебном заведении, специализирующемся на медиа, то есть, что интересно, команда основателей изначально пришла из области создания контента, а не из сферы машинного обучения/информатики.
Это также подтверждается тем, что Runway ежегодно проводит кинофестивали в Нью-Йорке и Лос-Анджелесе. Прекрасный пример того, что люди из «классической» отрасли приходят в сферу ИИ и добиваются больших успехов.
За шесть лет Runway привлекла множество инвестиций, в том числе еще до бума ChatGPT и искусственного интеллекта в целом, последняя из которых составила 141 миллион долларов в июне 2023 года, в результате чего компания была оценена в 1,5 миллиарда долларов.
Заключительная оценка и альтернативы
Несмотря на то, что у нас самих нет премиум-аккаунта Runway, поскольку в данный момент он нам не нужен, мы находим этот инструмент очень впечатляющим, а результаты его работы порой действительно хороши. Множество функций позволяют нам не просто создавать видео, но и целенаправленно работать с ним, задавать определенные движения и многое другое.
Конечно, немного жаль, что без оплаты можно сгенерировать сравнительно немного контента, но, с другой стороны, это понятно, поскольку создание видео требует больших вычислительных мощностей и, соответственно, обходится компании недешево.
Если говорить об альтернативах, то, на наш взгляд, в настоящее время у Runway нет «настоящих» конкурентов. Sora, конечно, выглядит впечатляюще, но, помимо демо-видео и противоречивых заявлений технического директора Миры Мурати, которая говорит «уже в этом году», и команды Sora, которая говорит «не в обозримом будущем», информации о том, как и когда мы сможем его использовать, нет.
Pika была нашей большой надеждой, но после первых тестов, проведенных после релиза, мы даже не стали записывать видеоролик, поскольку посчитали его недостаточно хорошим, и во время работы над этим видео наше мнение не изменилось, поэтому на сегодняшний день RunwayML является безоговорочным лидером в области Text-to-Video и Image-to-Video.
