Вы когда-нибудь мечтали создавать видео по своим текстовым описаниям? Например, написать «дракон летит над замком» и получить ролик с этой сценой? Если да, то у вас есть уникальная возможность попробовать это сделать с помощью нейросети Runway Gen-2.
Это новая технология, которая позволяет генерировать видео по тексту, изображению или видеоклипу. В этой статье я расскажу вам, что такое Runway Gen-2 и как ей пользоваться.
Что такое Runway Gen-2 и зачем она нужна?
Runway Gen-2 — это мультимодальная система искусственного интеллекта, которая может генерировать новые видео с помощью текста, изображений или видеоклипов. Нейросеть была запущена стартапом Runway AI Inc. в 2023 году и стала доступна для всех пользователей в июне этого же года. Runway Gen-2 является вторым поколением нейросети, которая значительно превосходит первое поколение Gen-1 по качеству, реалистичности и управляемости.
Основные режимы работы нейросети
Нейросеть Runway Gen-2 имеет различные режимы работы, вот основные из них:
1. Создание видео из текста или изображения. С помощью этого инструмента вы можете сделать видеоклипы с текстовыми или графическими подсказками. Также вы можете использовать кисть для движения Motion Brush, которая теперь доступна в функции Image to Video.
2. Редактирование фона. Вы можете удалить, размыть или заменить фон вашего видео.
3. Создание изображения из текста. Вы можете сделать уникальные картинки, используя только слова.
4. Преобразование изображения с помощью текста. Вы можете изменить любую картинку, используя текстовую подсказку.
Как пользоваться Runway Gen-2?
Пользоваться Runway Gen-2 очень просто и удобно. Вам нужно:
1. Зарегистрироваться на сайте Runway или скачать приложение для iOS.
2. Выбрать нужный вам режим работы нейросети. Я выбрала Text/Image to Video, чтобы создать видео.
3. Затем нужно ввести запрос на английском языке и дождаться генерации.
Runway Gen-2 создает не полный ролик, а короткое четырехсекундное видео. Вы можете посмотреть результат на экране и, если он вам понравится, сохранить его на свой компьютер.
Стоимость нейросети и ограничения
Бесплатное создание видео имеет ограничения. После регистрации вы получаете 525 кредитов. 5 кредитов равны 1 секунде видео. Это означает, что у вас будет бесплатно 105 секунд для генерации видео. Для получения большего количества кредитов и возможностей вам необходимо оформить платную подписку.
Вот несколько примеров, что можно сделать с Runway Gen-2:
Покажу вам несколько примеров видео, которые я создала. Сначала я создала изображение с помощью нейросети Кандинский по такому запросу:
футуристический городской пейзаж с экологически продуманным дизайном, пышной зеленью, обилием деревьев, технологиями, пересекающимися с природой в 2300 году, в стиле кинематографичности, объект в фокусе, красивый, голубое небо, красочно
После этого я воспользовалась функцией text/image to video в нейросети Runway Gen-2. Вставила изображение и написала текст к нему:
futuristic urban landscape with an ecologically thoughtful design, lush greenery, abundance of trees, technologies that intersect with nature in the year 2300, in the style of cinematography, cinematography, object in focus, beautiful, cinematic, blue sky, colorful
Также воспользовалась функцией кистью для движения Motion Brush. Я выделила облака и выставила движение в нужном направлении. Выставила движение камеры «приближение». И вот какое видео я получила:
Для создания этого видео я тоже воспользовалась функцией text/image to video. Вставила изображение и написала текст к нему:
Cinematic action, cinematic film, kitten is playing, daylight
И получила такое видео:
А вот следующие видео я создала только по текстовому описанию. Загрузить их у меня не получилось на Дзен, так как их длительность меньше 5 секунд. Но вы можете посмотреть их на моем сайте по этим ссылкам: ночной город и лиса.
Полезные ссылки, которые помогут вам в освоении навыка генерирования видео в нейросети Runway Gen-2:
1. Gen-2 Prompt Tips — как правильно составлять текстовые запросы для создания видео.
2. Gen-2 Prompting Modes — описания режимов работы нейросети.
Напоследок я хочу вам сказать, что нейросеть Runway Gen-2 может помочь вам воплотить свои фантазии в видеоформате. Вы можете создать собственный мини-фильм, музыкальный клип, анимацию, рекламу или просто забавный ролик для соцсетей. Это простая в использовании модель преобразования текста в видео, которая позволяет создавать все, что вы только можете себе представить. Но нейросеть не всегда дает идеальный результат, иногда она может ошибаться, запутаться или не понять ваш запрос. Не расстраивайтесь, если вы не получили то, что хотели, а попробуйте исправить или изменить свой текстовой запрос.
Надеюсь, эта статья помогла вам узнать больше о нейросети Runway Gen-2 и как пользоваться ей для генерации видео. Это удивительная технология, которая открывает новые горизонты для творчества и развлечения. Попробуйте ее сами и поделитесь своими впечатлениями в комментариях. А я пока пойду генерировать еще пару видео для своего канала. Пока-пока!
P.S. Не забудьте подписаться на мой канал и оставить свой лайк и комментарий.