Найти в Дзене
Киномысли

Нейронные сети, компьютерная графика в примерах при создании аудиовизуального продукта.

Современные технологии дают нам безграничные возможности. Компьютерная графика, которая используется при создании компьютерных игр, анимационных фильмов и сериалов, кинофильмов с каждым годом все больше и больше поражает нас своими возможностями. Сегодня уже активно в социальных сетях обсуждают способности нейронных сетей. Какие возможности нейронные сети дают продюсерам при создании

Современные технологии дают нам безграничные возможности. Компьютерная графика, которая используется при создании компьютерных игр, анимационных фильмов и сериалов, кинофильмов с каждым годом все больше и больше поражает нас своими возможностями. Сегодня уже активно в социальных сетях обсуждают способности нейронных сетей. Какие возможности нейронные сети дают продюсерам при создании кинофильма?

Ключевые слова: нейронные сети, CGI графика, компьютерная графика, кинематограф, 3D, «захват движения», mocap, замена лица, Шварценеггер, Пол Уокер, Уилл Смит, Владислав Галкин.

28 декабря 1895 года в «Гран-кафе» на бульваре Капуцинок в Париже состоялся первый публичный показ кинематографа в мире. Вот уже 125 лет этому искусству. В истории кинематографа много происходило интересных моментов, в том числе и когда режиссеры и предприниматели (которых спустя годы назовут продюсерами) доказывали, что кинематограф – это искусство.

Много чего было придумано, чтобы завлекать и удерживать зрителей у большого экрана. Началось с банального монтажа, звука, цвета. Это для нас, искушенных зрителей, это такая банальность. А для зрителей тех времен – необыкновенное событие, сродни чуду.

Для сегодняшнего зрителя кинематограф – аттракцион. Массовый зритель идет в кинотеатры, чтобы «покататься» на данном аттракционе. Поэтому всем так полюбились кинокомиксы. Это даже сдал отдельный жанр.

И доступно стало такое кино благодаря CGI графике (computer generated image). Сегодня фильм без CGI графики – уже никому не интересен. Такой фильм может быть авторским проектом для узкого круга зрителей. Массовому зрителю нужен экшн, драйв, зашкаливающие эмоции. Без компьютерной графики такое практически невозможно. Даже большинство животных в кино сегодня оживает благодаря этой самой графики. Все знают такое словосочетание, как «CGIграфика». А что оно означает? Для чего она (графика) нужна? И какие виды ее бывают. Обратимся к профессиональной терминологии.

CGI (аббревиатура «изображение, сгенерированное компьютером») – это изображение, сформированное и управляемое посредством компьютера. Вид искусства, в котором компьютеры используются как инструмент для создания и художественной обработки визуальной информации. Получение г. к. является многоэтапным процессом, который может изменяться в зависимости от специфики создаваемого аудиовизуального продукта (авп). Различаются следующие виды г. к.: растровая, векторная, 2D, 3D и т. д. В рамках авп могут использоваться одновременно несколько видов г. к.

Графика компьютерная растровая - компьютерная графика, формирующая изображение на основе массива точек (пикселей). Координаты и цветовое пространство каждого пикселя описывается в математическом коде. Например, в виде г. к. р. представлены текстуры моделей виртуальных объектов, фотографические изображения и изображения любого авп в цифровом формате. Степень детализации изображения зависит от количества пикселей, из которых оно состоит.

Графика компьютерная векторная – компьютерная графика, формирующая изображение на основе простейших геометрических объектов: точек, прямых, кривых и многоугольников, описанных формулами. Например, в виде г. к. в. представлены модели виртуальных объектов. Степень детализации изображения зависит от количества фигур, из которых оно состоит.

Графика компьютерная двухмерная – компьютерная графика, основанная на работе с графическими объектами в двумерном виртуальном пространстве.

Графика компьютерная трехмерная – компьютерная графика, основанная на работе с графическими объектами в трехмерном виртуальном пространстве. Отличительной особенностью г. к. т. от двухмерной является введение измерения глубины, что позволяет создавать графику максимально приближенную к реальности, а также оперировать трехмерными объектами по законам физики реального мира. При этом результатом работы может являться авп как в формате 3D, так и в формате 2D.

Ух! Если вы это прочитали и не засушили себе мозг, то это просто замечательно! Как мы понимаем, в большинстве, вернее практически всегда используется компьютерная графика 3D. Она применяется в компьютерных играх, кино, мультфильмах и мультсериалах. Уже практически никто не снимает мультфильмы в 2D (искл. Студия «Мельница» франшиза «Три богатыря»).

И все мои мысли на тему компьютерной графики начались вовсе не из-за анимации и компьютерных игр, где данная система активно применяется. А речь пойдет, конечно же, о кино.

Речь не идет вовсе о различных Кинг-Конгах и динозавров из «Мира Юрского периода» (рис.1), где данная функция компьютерной графики просто необходима. А речь пойдет о фильмах, где по той или иной причине вынуждены были использовать данную технологию.

Рисунок 1 – Кадр со съемок к/ф «Мир Юрского периода 2» (2018г, реж. Хуан Антонио Байона)
Рисунок 1 – Кадр со съемок к/ф «Мир Юрского периода 2» (2018г, реж. Хуан Антонио Байона)

В 2003 году американский актер австрийского происхождения Арнольд Шварценеггер был избран на пост губернатора Калифорнии. В 2006 году он был переизбран на второй срок, который истек в 2011 году. По Конституции США, он не мог быть избран на третий срок. За период его политической деятельности произошло много чего полезного для жителей штата Калифорния. Нам это не столь интересно. Можно просто почитать политические статьи или в его биографиях (в автобиографии «Вспомнить все: Моя невероятно правдивая история», 2013 он об этом тоже не особенно упоминает).

Как и любой политик, Арнольд Шварценеггер не имел права сниматься в фильмах во время своей губернаторской деятельности. А в 2008 году 5 мая начались съемки кинофильма «Терминатор: Да придет спаситель» - четвертая часть франшизы о Терминаторе. Для массового зрителя фильм о Терминаторе без Терминатора – это не фильм. Но ведь главному «Терминатору» нельзя сниматься в кино. Что же делать? И тут пришла на выручку та самая компьютерная графика! Персонаж Арнольда Шваценеггера все же появился в одной единственной сцене (ох, наверное, много денег пришлось отвалить авторам фильма за использование данного образа!). Мировая премьера фильма состоялась 14 мая 2009 года, а в РФ – 4 июня 2009 года. При бюджете в 200 млн. $, фильм собрал в мировом прокате 371,3 млн. $. Но сейчас речь не об экономике фильма.

В данном фильме впервые Арнольд Шварценеггер не смог сыграть и его играл бодибилдер Роланд Кикинджер, на тело которого наложили цифровое лицо 37-летнего Шваценеггера (рис. 2). Именно в возрасте 37 лет Арнольд снимался в первой части знаменитой франшизы.

Рисунок 2 – Кадр из фильма «Терминатор: Да придет спаситель» (2009г, реж МакДжи) с «цифровым» Арнольдом Шваценеггером
Рисунок 2 – Кадр из фильма «Терминатор: Да придет спаситель» (2009г, реж МакДжи) с «цифровым» Арнольдом Шваценеггером

Это не единственный фильм, где снимали героя без актера. Вот об этом именно и хочется поговорить. В случае с «Терминатором» все было понятно. Одно появление в одной сцене. А что же делать, если актер погибает в период съемок, когда уже часть сцен с ним отснято?

30 ноября 2013 года – день, когда миллионы фанатов плакали. В этот день в автомобильной катастрофе погибает красавец мужчина, любовь миллионов женщин мира – Пол Уокер (рис. 3). Он со своим другом возвращался с благотворительного мероприятия организованного фондом «Reach Out Worldwide», когда водитель не справился с управлением машины и врезался в фонарный столб. Машина сразу же загорелась. За рулем был друг Пола. Эта новость была печальна не только для фанатов актера, но также и для съемочной команды кинофильма «Форсаж 7», съемки которого уже активно шли. Слишком много кадров было отснято с красавцем Полом Уокером, чтобы его вырезать из фильма. А если убить персонажа, то для продюсеров это могло означать только одно – «убить» всю франшизу.

Рисунок 3 – Пол Уокер (12.09.1973 – 30.11.2013)
Рисунок 3 – Пол Уокер (12.09.1973 – 30.11.2013)

Продюсерам пришлось «отодвинуть» дату премьеры фильма. Нужно было переписать сценарий.

Решение было принято – «цифрового» Брайна О’Коннера (герой Пола Уокера) будут играть братья Пола – Калеб Майкл и Коди Уокеры (рис. 4,5).

Рисунок 4 – Калеб Майкл Уокер
Рисунок 4 – Калеб Майкл Уокер
Рисунок 5 – Коди Уокер
Рисунок 5 – Коди Уокер

Кинофильм «Форсаж 7» вышел в мировой прокат 3 апреля 2015 года, а в России – 9 апреля того же года, вместо 11 июля 2014 года. Кассовые сборы фильма при бюджете в 190 млн. $ составили 1,5 млрд. $ в мировом прокате (сборы в США составили 353 млн. $). Фильм имел такой колоссальный успех, что продюсеры сразу продлили франшизу еще на 3 части. Всем прекрасно известно, по какой причине фильм имел успех – сработал «черный пиар», смерть ведущего актера.

И хотя, фанаты франшизы досконально через «микроскоп» разглядывают, где же именно использована «цифровая» копия актера, это совсем не мешает продолжать жить герою даже после смерти актера. На сегодняшний день, кинофильм «Форсаж 7» занимает восьмую строчку в списке самых кассовых фильмов за всю историю кинематографа с кассовыми сборами в 1,5 млрд. $ и является третьим самым кассовым фильмом 2015 года.

Но не всегда цифровое использование героя приносит успех фильму. А может в случае со следующим проектом, продюсеры потерпели крах из-за сценария, а не вовсе из-за использования компьютерной технологии? Речь идет о фильме «Гемини» (рис. 6), мировая премьера которого состоялась 25 сентября, а в России – 10 октября 2019 года. При бюджете в 138 млн. $ фильм собрал всего лишь 173,4 млн. $. Фильм, как говорится, вышел в «ноль». Но при этом, создателям не принес ничего, кроме убытков. А в фильме была использована цифровая копия молодого Уилла Смита.

Рисунок 6 – Афиша к фильму «Гемини» (2019 г., реж. Энг Ли)
Рисунок 6 – Афиша к фильму «Гемини» (2019 г., реж. Энг Ли)

В своем Twitter журнал Wired написал о молодом Уилле Смите из «Гемини»: «Ему не нужны: актерский трейлер, еда и зарплата, он не занимает место в пространстве, потому что находится на жестком диске». Так в чем же проблема? Почему же фильм потерпел такой крах? Фильм, где мы видим полностью «цифрового актера» с молодым лицом Уилла Смита оказался не успешен. Причина вовсе не в «цифровом актере». В данном случае, все дело в сценарии.

Молодой Уилл Смит был создан не только благодаря CGI графики, но и так же «Захвату движения».

«Захват движения» (Mocap – Motion capture) - технология получения компьютерной анимации методом автоматического переноса движений реального объекта (актера) на цифровую модель. Основана на применении специальных цифровых камер, измерительных приборов и программного обеспечения. Может использоваться как форма ротоскопа. Позволяет добиться реалистической детализации, движений в объемном пространстве. В силу заметных эстетических и физических отличий движений актеров от анимационных персонажей анимация, полученная при 3D, часто требует последующей ручной доработки. Системы 3Dбывают: 1) оптические, где движения реального объекта фиксируются скоростными цифровыми камерами, расположенными по периметру съемочной площадки. Наиболее распространенный вариант 3D (частный случай, при котором синхронно фиксируются движения тела актера и его мимика называется Performance capture); 2) бескамерные, где движения реального объекта фиксируются закрепленными на нем механическими и/или электрическими датчиками, которые бывают: электромеханические (магнитные, гироскопические, акселерометрические); экзоскелетронные (потенциометрические, пьезоэлектрические) и т. п.

То есть, для создания такого крутого персонажа было затрачено столько сил, денег, а вот сюжет продумать не смогли. И даже становится обидно, что решили внедрить такую технологию в довольно посредственный проект. К сожалению, в данном фильме, кроме как на Уилла Смита, смотреть больше нечего. Может поэтому пока «цифра» не может заменить реальных актеров? Если в случае, с «Форсажем» там «цифровой актер» был необходим.

Все выше описанные проекты, как вы уже заметили производства США. А что же Россия? Россия тоже решила сделать шаг в этом направлении. Пока только в производстве телевизионных сериалах. Речь идет о мини-сериале (4 серии) «Диверсант - 3. Крым» (2020 г., реж. Дмитрий Иосифов), премьера которого состоялась 9 мая 2020 года на телеканале «Первый». История такова, что две первые части «Диверсант» и «Диверсант 2: Конец войны» (рис. 7) были выпущены в 2004 и в 2007 годах соответственно. Одну из ведущих ролей играл актер Владислав Галкин, который, к сожалению, в феврале 2010 года скоропостижно скончался.

Рисунок 7 – Обложка к DVD «Диверсант 2 – Конец войны». На обложке капитан Калтыгин, которого играл Владислав Галкин (25.12.1971 – 25.02.2010)
Рисунок 7 – Обложка к DVD «Диверсант 2 – Конец войны». На обложке капитан Калтыгин, которого играл Владислав Галкин (25.12.1971 – 25.02.2010)

Смерть актера нарушила планы многих продюсеров. Шли разговоры о продолжении сериала «Котовский», который считается последней работой актера. Были разговоры и о режиссерских работах Галкина (в 1999 году закончил режиссерский факультет ВГИКа мастерская Вл. И. Хотиненко).

На протяжении долгого времени режиссеры и продюсеры хотели сделать проект, который был бы посвящен Владу. Но так все и не находили. И вот, спустя десять лет со дня смерти актера выходит мини-сериал, посвященный памяти Владислава Галкина. Говорить о сюжете совсем не будем. Для этого есть специальные сайты и рецензии. Суть ведь не в том, о чем проект, а о том, как они ЭТО сделали.

Из интервью Кирилла Плетнева (играет лейтенанта Алексея Бобрикова – гл. роль) журналу «КиноРепортер»: «Сейчас мы снимаем «Диверсант-3», где вам по 20 лет, и вы в Крыму». Но Влад все же появится – с помощью компьютерной технологии с заменой лица. Не знаю, как это будет выглядеть в кадре, там всего несколько сцен, но смотрелось жутковато, поэтому не знаю, как отреагируют зрители».

А как должны отреагировать зрители, увидев на экране любимого умершего десять лет назад актера в новом проекте? Мне кажется, что многие предвкушали эту встречу, готовились к ней, как к свиданию. Но, в российском кинематографе такое часто бывает, что пообещают, а в итоге…

Мы видим только фотографию с изображением молодого Григория Ивановича Калтыгина - герой Владислава Галкина (рис. 8), да в финале со спины видим человека, которого называют Григорием Ивановичем.

Рисунок 8 – Кадр из мини-сериала «Диверсант - 3. Крым» (2020 г., реж. Дмитрий Иосифов). На фото – молодой Григорий Калтыгин и его приемный отец Александров
Рисунок 8 – Кадр из мини-сериала «Диверсант - 3. Крым» (2020 г., реж. Дмитрий Иосифов). На фото – молодой Григорий Калтыгин и его приемный отец Александров

Вот и все, что из обещанного нам показали. Очень жаль. Но все же спасибо продюсерам и авторам проекта, что на протяжении всех четырех серий персонажи активно напоминали зрителям о капитане Калтыгине в настоящем времени. Была интрига, что, в конце концов, зрители увидят своего любимого персонажа. И вот, если бы зрители увидели цифрового Владислава Галкина, как в случае с клоном героя Уилла Смита из фильма «Гемини», то это произвело бы такой фурор! Персонаж, который живет даже после смерти актера! Вот для чего нужно использовать нейронные сети, которые сегодня активно обсуждают в мире – компьютер способен обучаться и работать в похожих ситуациях. Это дает нам возможность заменять лицо актера на другое лицо. Например, на лицо Элвиса Пресли. Задача статиста – полностью скопировать манеру поведения и жесты Элвиса, и тогда на экране оживет Король Рок-н-Ролла.

Но для чего же большинство использует нейронные сети? Для обычного развлечения. В Сети появляются различные «фейковые» видео с современными «звездами». Неужели человечество разрабатывало и придумало такую сложную технологию ради того, чтобы мы могли лицезреть «поддельные» видео?

Незадолго до смерти Владислава Галкина из жизни ушел замечательный актер Патрик Суэйзи (18.08.1952 – 14.09.2009). Примерно с того времени, у меня появилась мечта, что когда-нибудь компьютерные технологии разовьются настолько, что можно будет потанцевать тот самый «грязный танец» с «цифровой» копией или голограммой актера. Фильм «Грязные танцы» 1987 г, реж. Эмиль Ардолино сделал Патрика мировой звездой. Или сходить на концерт группы «Битлз» в полном составе. Взять автограф у самой Мэрилин Монро. Сходить на спектакль с великолепной Натальей Гундаревой. А известная всем надпись «Цой жив!» стала бы пророческой.

Технологии не стоят на месте, и «цифровые актеры» не заменяют живых, но дают возможность увидеть на экране тех, кого в данном проекте увидеть невозможно. Если зрители и продюсеры направят свой креатив из русла создания фейковых видео в правильное русло, то мои мечты могут стать реальностью. Надо только очень постараться нам всем. Если компьютерные технологии уже сегодня дают нам возможность увидеть полностью «цифрового актера» на большом экране кинотеатра, то какие же чудеса нас ждут уже завтра! Киноаттракцион, в хорошем смысле слова, должен продолжаться!

Используемые источники:

Литература:

1. Игорь Беленький. История кино: Киносъемки, кинопромышленность, киноискусство. - М.: Альпина Паблишер, 2019. – 405 с.

2. Машковцев Борис. Продюсирование анимационных фильмов: учебное пособие для студентов высших учебных заведений, обучающихся по специальности "Продюсерство" – М.: ЮНИТИ, 2017. – 247 с.

3. Саксина С. М., Шварценеггер Арнольд. Вспомнить все. Моя невероятно правдивая история – М.: Эксмо, 2013 – 704 с.

Интернет-ресурсы:

1. Интернет-сервис о кино «КиноПоиск» [Электронный ресурс] - Режим доступа https://www.kinopoisk.ru (дата обращения – 19.05.2020)

2. Общедоступная многоязычная универсальная интернет-энциклопедия Википедия [Электронный ресурс] - Режим доступа https://ru.wikipedia.org (дата обращения – 19.05.2020)

3. Сайт журнал о кино в России «КиноРепортер» [Электронный ресурс] - Режим доступа https://kinoreporter.ru (дата обращения – 19.05.2020)

4. Интервью Кирилла Плетневу журналу «КиноРепортер» [Электронный ресурс] - Режим доступа https://kinoreporter.ru/my-s-vladom-galkinym-horosho-druzhili-intervju-s-kirillom-pletnevym/ (дата обращения – 19.05.2020)

5. Портал о кино и театре «Кино-театр.ру» [Электронный ресурс] - Режим доступа https://www.kino-teatr.ru (дата обращения – 19.05.2020)