Найти в Дзене
ПсихоЮрист

Как сделать "вязаный" или LEGO-город с помощью нейросети?

Почти бесплатно и с минимальными затратами. Все социальные сети забиты "модным" трендом - вязаными стилизациями привычных городских улиц. Фото, короткие и не только ролики, даже целые мини-фильмы. Не отстают от "вязанки" города в стиле LEGO, бисера, керамики и бог знает чего еще. Наверняка вы уже видели в своей ленте что-то подобное (галерея). Санкт-Петербург, Лондон, Чикаго... никого не удивить, разумеется. Крупным городам - крупные проекты! Но многим хочется увидеть свой собственный городок, а заодно и удивить близких, местные социальные сети или даже региональную прессу. На самом деле ничего сложного нет. Все более чем легко и более чем бюджетно по деньгам. При некоторой степени технический познаний и изворотливости - почти бесплатно. Для абсолютного большинства задач используем VeoSeeBot в Телеграм. Есть небольшой лимит бесплатных генераций для ознакомления, платные же тарифы вполне гуманны + полная поддержка нормальных отечественных средств оплаты (СБП, карты МИР и т.д.). Кто
Оглавление

Почти бесплатно и с минимальными затратами. Все социальные сети забиты "модным" трендом - вязаными стилизациями привычных городских улиц. Фото, короткие и не только ролики, даже целые мини-фильмы. Не отстают от "вязанки" города в стиле LEGO, бисера, керамики и бог знает чего еще.

Наверняка вы уже видели в своей ленте что-то подобное (галерея).

Санкт-Петербург, Лондон, Чикаго... никого не удивить, разумеется. Крупным городам - крупные проекты! Но многим хочется увидеть свой собственный городок, а заодно и удивить близких, местные социальные сети или даже региональную прессу.

На самом деле ничего сложного нет. Все более чем легко и более чем бюджетно по деньгам. При некоторой степени технический познаний и изворотливости - почти бесплатно.

Чем делаем?

Для абсолютного большинства задач используем VeoSeeBot в Телеграм. Есть небольшой лимит бесплатных генераций для ознакомления, платные же тарифы вполне гуманны + полная поддержка нормальных отечественных средств оплаты (СБП, карты МИР и т.д.).

Кто в курсе как сделать так, чтобы недоступные из РФ сайты сделать доступными - те могут пользоваться "напрямую" теми нейросетями, которые будут указаны ниже. При наличии бесплатной возможности что-то сделать я вас о ней проинформирую.

Что делаем?

Экспериментировать на чем-то банальном не хочу. Эксперименты будем делать с видами города Серпухов. Почему Серпухов? А попросил коллега "оживить" в различной стилистике его родной город.

Поехали!

Этап 1. Генерация статичных кадров

Первым делом нам надо трансформировать обычные фото в кадры нужной стилистике.

Для примера берем вот эти три кадра, найденные в поиске Яндекса. Источник - сайт mosprogulka.ru. Все права, разумеется, принадлежат авторам.

Специалисты по нейросетям рекомендуют пользоваться нейросетью Seedream. Буду честен - "напрямую" ей не пользовался, только через бот выше, т.к. даже платная генерация через него стоит копейки - 3-6 рублей/кадр.

Получилось вот что (листаем галерею):

Весьма достойно и легко. Использованный промпт:

Превратите эту сцену в мир рукодельного текстиля. Сохраните композицию и объекты. Все элементы выполнены из мягкой шерсти, пряжи, войлока и вязаных текстур — здания, транспорт, деревья, тротуары, вода, небо. Сохраните оригинальное освещение, но передайте его через текстильные материалы: видимые стежки, ворс, вязку.
Эффект — гиперреалистичная текстура волокон, уютная и тактильная эстетика ремесла, без искажений сцены. На небе тучи, дождь и солнце

Здесь и далее - промпты взяты из оф.сообщества упомянутого выше бота, найдены на просторах интернета или же незначительно изменены под мои нужды. На авторство не претендую, просто аккумулирую открыто доступную информацию.

Были мысли сравнить реализацию "вязаной" идеи в разных нейросетях, но... Зачем, когда результат и так устраивает?

Если в вашем случае фото, например, не содержит людей или машин - их можно добавить через Nano Banano. Как с ней работать (и заодно - делать фотосессии), мы уже разбирали тут:

Допустим, на этом фото нам надо добавить пару человек для более "живого" кадра.

-5

Промпт следующий:

Добавь несколько человек в вязаном стиле кадра, идущих по тротуару за черно-белым бордюром, добавь велосипедиста, едущего справа налево по обочине.

Применительно к редактированию, вы уже самостоятельно прописываете инструкции. Они должны быть максимально однозначными, если хотите точности, либо же простыми (как выше), если не хотите соблюдать строжайшие правила. Вот тут, например, нейронка сбоит из-за недостаточно конкретного описания местоположения людей и лепит их на дорогу.

Кто не хочет осваиваться с навыками промпт-инжиниринга, те могут просто сделать 2-3 варианта генераций фото. Там в любом случае будет хороший результат!

А если из LEGO?

Да не вопрос. Вот вам LEGO.

Использован ПРОМПТ:

Преврати мое фото в мир из LEGO.
Гиперреалистичная диорама из LEGO: вся сцена собрана из настоящих кирпичиков, пластин и минифигурок. Яркие цвета пластика, видны стыки и шипы, глянцевые текстуры. Никаких реальных человеческих лиц, кожи или волос — только детали LEGO. Теплый закатный свет, глобальное освещение, объемный свет, 4K, кинематографичное качество, высококачественные шейдеры (SEUS / BSL / RTX).

Дети особенно оценят. Да и не только дети.

Но есть косяк.

-7

Вот этот гражданин явно несоразмерен обстановке, да и машина не по правилам едет. Мелочь, но хейтеры непременно пнут. Машину оставим без изменений (вдруг там одностороннее движение?!), а человечка покажу как удалить.

Вариантов у нас 2.

  • Первый - сгенерировать еще раз.
  • Второй - через NanoBanano удалить фигурку. Заодно и добавить что-то взамен.

Простейший промпт:

Удали фигурку человечка. Добавь велосипедиста в LEGO-стиле на дорогу

И вот такой результат.

-8

Пойдет!

Все операции с фото выполнял через VeoSeeBot в Телеграм. Затраты составили около 50 рублей "живых" денег. Альтернатива - работа с редактированием фото или даже генерацией через gemini.google.com. Полный доступ только из США, ряда азиатских стран (Япония и Южная Корея), Европа и РФ мимо.

Да, еще. Я все кадры делал в 16:9, т.к. мне так привычнее и легче монтировать. Ничего не мешает сделать в формате 9:16 для вертикальных роликов. Выбирайте соответствующую опцию, где она есть, или прямо пишите "формат 9:16" в промпте.

Этап 2. Оживляем кадры в видео!

Переходим к следующему этапу. Он чуть сложнее и дороже.

Основная масса рекомендаций по "оживлению": использовать нейросеть Kling AI. Доступна все в том же боте. Прямым доступом к ней не пользовался.

Стоимость одного оживления через бота - около 50 р. за видео 5 сек. Дороговато, если делаете "побаловаться" и когда кадров с десяток. Но вполне доступно, если это контент для коммерческой/монетизированной площадки.

Промпт для оживления LEGO:

атмосферное видео, человечки ходят, камера снимает с медленным зумом вперед/назад, сверху/как с квадрокоптера и т.д., машины едут, огни в домах и на улице горят.

Вот так у нас получается оживить в Kling AI. Озвучки в нем нет.

-9

Шикарно, как по мне!

Так как я обещал предложить бесплатные вариации, то обещание держу и снова предлагаю grok.com (напрямую в РФ недоступен, к сожалению, но мы же понимаем... 😈). Там есть раздел Imagine, туда кидаем фото и нейронка сама интуитивно оживляет картинку.

Без промптов и прочих плясок получилось так:

-10

Достойно. Но вдруг что-то не нравится - используем тот самый промпт, что выше.

Будет вот так:

-11

Безусловно, мне нравится вариант 2. Его и оставляем. Grok, кстати, может сразу озвучить видео. Фоновую музыку лучше убрать, если будете накладывать свою.

Аналогичный алгоритм и для "вязаных" кадров.

Промпт для оживления "вязаных" городов такой же:

атмосферное видео, человечки ходят, камера снимает с медленным зумом вперед/назад, сверху/как с квадрокоптера и т.д., машины едут, огни в домах и на улице горят.

Рекомендую в зависимости от времени суток убирать/добавлять инструкцию про огни на столба/в домах.

Вот пример с Kling AI

-12

А это - Grok.

-13

Вот с "вязаными" вариантами Grok лучше справляется без промпта, сам интуитивно понимает механизмы оживления.

Этап 3: Монтаж

Монтаж делаем в CapCut или другом, удобном для вас, редакторе. Кому проще - могут сразу во встроенном редакторе соц.сети/площадки (типа ВК-видео, Рутуба и т.д.).

Вот что получилось:

Собрал на скорую руку, без заморочек. Музыка сделана в Suno, озвучка - Sora.

В заключение

  • Кому нужно легко и просто - генерят всё в боте VeoSeeBot. Из минусов: генерация видео для ролика в 30-40 секунд встанет рублей в 500-600. Для кого-то такой вариант будет неудобным.
  • Кому дешево и много - тем альтернатива для оживления Grok. Сам им пользуюсь на повседневке, очень удобно и доступно. Последний ролик про "Леху и Медведя" собран, преимущественно, через Imagine от Grok. В таком случае ролик обойдется в расходах до 100 рублей.

Не скрываю, что можно использовать для генерации статичного кадра Nano Banano, используя бесплатные попытки, и в принципе ролик не потребует от вас финансовых расходов. Но мне удобнее так, как описал.

Ах да, для душнил. Упомянутые ИИ-сервисы, которые недоступны из РФ, ограничены не со стороны России! Это санкции и инициатива ограничения со стороны нейронок. Так что никакого пиара "запрещенки" нет.

"Нравлик" по традиции, остальное - как желаете...

Приглашаю поделиться тем, что получилось у вас в комментариях к записи ВКонтакте или в Телеграм. Дзен, увы, разрешает прикреплять фото в комментариях только владельцам платных подписок... 😐

ВКонтакте || Телеграм || MAX || Одноклассники || RuTube

💸 Донаты приветствуются: поддержать автора канала можно по кнопке ниже или по этой ссылке. Как мы все в курсе - финансово Дзен совсем стал "не торт".