Весна 2025. Близится к своему завершению мой 4 курс обучения на режиссёра во ВГИКе и тут у нас в университете открывают набор на курс "Нейросети в кинематографе" от Школы 21. Ну что ж, врываемся!
Внимание: я студент, мне 25 лет, "жизни ещё не видал" и к нейросетям до Школы 21 относился только негативно - слишком мало доверия вызывали видео с 6 пальцами у людей и постоянно меняющейся картинкой. Всё, описанное далее - не призыв или экспертное мнение, а лишь моё скромное желание поделиться опытом (пусть и небольшим) с теми, кто так и не решился пощупать это "будущее".
Начнём, пожалуй, с того, что все видео авторов, утверждающих, что с помощью нейросетей можно сделать полноценную видеоработу с героями, локациями, музыкой и озвучкой - правда. Этот ролик сделан буквально за один день от и до. Здесь бы по-хорошему оставить плашку с комментариями, чтобы наглядно было видно - а что думают люди по этому поводу? - но, я новичок на Дзене, поэтому вообще не в курсе как тут и что работает. Оставляйте ваши комментарии где-нибудь, буду читать, узнавать.
Продолжим. По моему мнению: ну такое. И, казалось бы, такая оценка от самого автора должна отпугнуть или, как минимум, насторожить зрителя. Но самое интересное дальше - это не моя работа. Точнее, то что получилось на выходе принадлежит, конечно же, мне - как творцу. Но именно "работа"...
Если дочитал до этого момента и не уснул - спасибо. В этом разделе цитаты меня в прошлом, когда создавалось это видео.
"Алиса*, придумай идею короткого видео, такого мотивационного, и чтобы был космический корабль"
Алиса* - Yandex.GPT, но эту привычку не искоренить)))
"Deepseek, у меня тут идея гениальная возникла, распиши-ка её поподробнее и обязательно добавь такие-то цвета и подчеркни их как-нибудь смыслом"*
* - на том этапе я думал, что смогу создать яркий контраст между вылизанной стерильностью космического корабля и зелёной первозданностью джунглей. Спойлер: нет.
"Deepseek, оформи всё это в режиссёрский сценарий с хроном и таймингами каждого кадра"
Дальше я отправился в какую-то нейросеть, чтобы оформить всё сгенерированное в формате таблицы, но у меня не получалось нормально скопипастить это дело в Word, поэтому я просто поручил это Deepseek'у.
Итак, у меня есть идея, синопсис, сценарий.
+Совет: делаешь видео, делаешь крутой клип, снимаешь кино, мультфильм или просто записываешь на телефон кота с перспективой выложить в соцсети - делай раскадровку! Раскадровка - это не какой-то документ, который является Библией твоего проекта, или что-то сверхважное, без чего тебе не вручат статуэтку. Нет, многие режиссёры вообще забивают на это дело, но я, со своей колокольни, как человек, у которого нет кризиса идей, но есть кризис реализации этих идей говорю Вам, братцы - без раскадровки не снять кина.
Эта магическая штука, будь то огуречные человечки в старом блокноте или прешуты из игровых движков со взрывами на фоне и тонной материалов в кадре, обманывает твой мозг, желающий отделаться от мыслей о труде и как бы говорит ему: "Так вот оно, кино твоё, уже почти готово!"
Пришло время делать раскадровку. Тут, конечно, пришлось попариться, а именно:
"Яндекс.Шедеврум, такой-то кадр, такое-то наполнение, так стоит камера, всё cinematic quality, 8k, ultra."
Ну и, собственно всё. Почему в Шедевруме? Быстро, несколько вариантов, бесплатно (на тот момент), а главное не приходилось писать переводчику промпты и Ctrl+C, Ctrl+V. Сложно...
Минус: вообще 0 реакции на положение камеры, но судя по тому, что в том же LTX Studio для движения камеры отдельный ползунок сделали - это не так уж и просто допереть цифровым умом.
Раскадровка кое-как готова. Пора обедать.
Теперь самое интересное - пора делать кадры. И тут открывается океан, в котором утонуть как два пальца... Ну в общем: Kling AI, Sven, RunAway, Шедеврум, Veo3, Kandinskiy, Stable Diffusion, Sora, Banana что-то там и тд. Я не буду писать о том, какие эти ребята хорошие или плохие, потому что все +/- одинаково устроены. Но попробовал я каждую в большей или меньшей (RunAway, а чё так дорого?!)) степени и мне не понравилось работать вообще ни в одной. И мой личный основной трабл - психологический. Поясню: когда ты сидишь в том же движке UE5 и пытаешься понять, как заставить лампочку работать от выключателя - у тебя полёт фантазии, *опа-часы и единственное твоё ограничение - естественные нужды. Твой перфекционизм в восторге после 16 часов беспрерывного сидения на причинном месте в позе грустного подсолнуха - "УРА! Я нажимаю и оно включается, потрачу-ка ещё 16 часов, чтобы оно теперь выключалось!" Ведь каждая нода в блюпринтах протянута твоими руками, пусть и по наводке из видеоурока на канале ТвояТруба.
Но с нейросетями дело обстоит совсем другим образом.
"Deepseek, такой-то кадр, так и так, делай промпт на чужом наречии, чтобы KlingAI(для примера) вразумел, что я хочу."
"Держи, хозяин! {промпт}"
"KlingAI (для примера), давай я тебе {промпт}, а ты мне видево покрасивше?"
"Держи, только ты хотел космический корабль, а я сделал консерву. И ещё ты хотел космос, но стол как-то поэстетичнее, да и вообще у тебя осталось мало коинов на генерацию - плати!"
Если кратко: перфекционист? Будь готов долго корректировать промпты, платить, терпеливо ждать. (Одну из генераций я ждал около 6 часов и вставил по итогу в финальный монтаж просто от безысходности)
Хочешь всё в одной стилистике? Выбирай одну нейронку, потому что промпты они читают абсолютно по-разному. Тут тебе не живой человек, которого премией умаслить можно или увольнением припугнуть, чтобы тебе Джентельменов в России снял. А ведь и снимет же!
Но самое главное: тотальная нестабильность нейросетей. И я не про баги, приколы, фейлы во время генераций. А про сам рынок. Представьте, что вам кидают что-то круглое, кричат лови, а на вопрос: "Что это?", - отвечают: "То ли философский камень, то ли граната, то ли просто комок грязи." Примерно так выглядят все новости про интеграцию нейросетей в жизнь человеческую для меня. Ну да, ладно, о чём это мы?
Кадры сделаны, монтаж видеоряда готов. Надо бы звук добавить.
И вот тут я, действительно, порадовался. "Udio, ты мой лучший друг!"
Эта нейронка делает музыку. А, учитывая, какая последнее время музыка в топах - хоть заходи сюда каждый день себе плейлист собирать. И только твой! Это, конечно, со стороны может выглядеть как крики восторженного идиота, но пока я искренне согласен с тем, что нейронки могут писать музыку. Да и промпты здесь написать ума не надо - жанр, настроение, если хочешь BPM. А контроля-то сколько... У! Где надо подрезал, где не нравится - затюнил, свои барабаны наложил - и всё, готов уникальный ремикс.
Это, кстати ещё один маленький совет тем, кто уже нагенерировал себе контента и сильно расстроился - слушайте музыку. Лечит раны творческой души!)
В общем и целом: сгенерировал себе музыку под это видео, подставил и сейчас спустя полгода решил всё-таки выложить и поделиться своими болью и радостью.
P.S.: мой первый пост на Дзене, не судите строго. Хочу попробовать снова поковыряться в нейромозгах - сделать минисериал уже на свою (нет, правда) идею. Пишите, что думаете по этому поводу в комментариях - прочту все до единного, обещаю. Да и в принципе буду рад почитать про ваш опыт с ИИ.
До встреч!
P.P.S.: вот на это синенькое слово жмяк и откроется видео, про которое шла речь)