Найти в Дзене
Вайб-Кодер

Генерация изображений и видео с помощью нейросетей

Часто в коротких видео можно встретить как какой-нибудь котик ходит в магазин, покупает продукты и кушает. И все это сгенерировано с помощью нейросетей. Я заинтересовался этой темой и захотел сделать нечто подобное. В этой статье я постараюсь объяснить весь процесс создания таких видео в доступной форме. Мы рассмотрим создание видео, на котором кот в костюме играет на пианино. В статье будут показаны варианты создания изображений и видео с помощью отечественных систем и иностранных. Для создания изображений мы будем использовать уже готовые сервисы. Процесс создания изображений будет довольно простым: нам нужно лишь ввести текст, который мы хотим увидеть на изображении, и выбрать стиль, если это предусмотрено в функционале сервиса. Сервис позволяет создать изображения с нужными соотношениями сторон. Шаги: Получилось у нас такое изображение: Опубликовываем нашего котика и жмем кнопку «Сохранить». Фото автоматически скачается на наш компьютер. Иностранный сервис для генерации изображений
Оглавление

Вступление

Часто в коротких видео можно встретить как какой-нибудь котик ходит в магазин, покупает продукты и кушает. И все это сгенерировано с помощью нейросетей. Я заинтересовался этой темой и захотел сделать нечто подобное.

В этой статье я постараюсь объяснить весь процесс создания таких видео в доступной форме. Мы рассмотрим создание видео, на котором кот в костюме играет на пианино. В статье будут показаны варианты создания изображений и видео с помощью отечественных систем и иностранных.

Изображения

Для создания изображений мы будем использовать уже готовые сервисы. Процесс создания изображений будет довольно простым: нам нужно лишь ввести текст, который мы хотим увидеть на изображении, и выбрать стиль, если это предусмотрено в функционале сервиса.

Шедеврум (Яндекс)

Сервис позволяет создать изображения с нужными соотношениями сторон.

Шедеврум от Яндекса для генерации изображений
Шедеврум от Яндекса для генерации изображений

Шаги:

  1. Нажимаем на кнопку «Создать»;
  2. Появляется интерфейс для создания изображения. Вводим интересующий нас текст. Например, «Кот во фраке»;
  3. Так как мы делаем короткое видео, то выбираем соотношение сторон 9:16 — оно чаще всего используется для соцсетей, так как люди смотрят короткие видео с мобильных устройств;
  4. Снова нажимаем кнопку «Создать».

Получилось у нас такое изображение:

Кот фо фраке в Шедеврум
Кот фо фраке в Шедеврум

Опубликовываем нашего котика и жмем кнопку «Сохранить». Фото автоматически скачается на наш компьютер.

Deepai

Иностранный сервис для генерации изображений. Имеет больше функционала для настройки нашего изображения, так как: качество либо скорость генерации изображения, стиль изображения: милый, фантастический, аниме и т.д. Также есть выбор соотношения сторон.

Deepai - сервис для генерации изображений
Deepai - сервис для генерации изображений

Шаги:

  1. Вводим в окно ввода «Piano»;
  2. Оставляем модель «HD»;
  3. Preference выбираем «Quality»;
  4. Стиль оставляем по умолчанию;
  5. Соотношение сторон выбираем последнюю форму (это 9:16).

В итоге у нас получается что-то подобное:

Сгенерированое пианино в Deepai
Сгенерированое пианино в Deepai

По кнопке скачиваем наше изображение.

Видео

Сервисов для создания видео не так много. Одни позволяют создать видео по нашему запросу из текста, а другие — по нашим изображениям. Рассмотрим оба варианта.

Шедеврум (Яндекс)

С этим сервисом мы уже познакомились ранее, поэтому сразу перейдем к шагам.

Шаги:

  1. Выбираем раздел «Видео»;
  2. Вводим запрос «Кот во фраке, играющий на пианино»;
  3. Нажимаем «Создать первый кадр».
Сервис создал нам первый кадр для видео
Сервис создал нам первый кадр для видео

Далее нажимаем «Создать видео» и ожидаем минутку. Далее, опубликовываем и сохраняем. У меня получилось такое видео:

Видео из Шедеврума
Видео из Шедеврума

Vidu

Также является иностранным сервисом для создания видео, но тут уже понадобятся наши ранее сгенерированные изображения для создания видео.
Авторизовываемся на сервисе и выбираем «Reference to Video»:

Vidu - иностранный сервис для генерации видео
Vidu - иностранный сервис для генерации видео

Шаги:

  1. Вставляем наши изображения: кот во фраке и пианино;
  2. Вводим запрос на английском: «A cat playing the piano»;
  3. Выбираем соотношение сторон 9:16;
  4. Нажимаем на кнопку «Create».

Начнется процесс генерации видео.

После завершения у меня получились такие видео:

Ничего страшного, если с первого раза не получилось создать хорошее видео. Это нормально, и у меня на это ушло несколько попыток.

Заключение

Процесс создания видео может быть не быстрым: нужно создать хорошее изображение, а то и несколько, потом из них создать удачное видео длиною в несколько секунд. Для полноценного видео с сюжетом может уйти еще больше времени.

Но если вам это интересно, то вы проведёте время с удовольствием. Мой друг, о котором я рассказывал в прошлой статье, создал множество качественных видео и наслаждался процессом.

-10