Итак, с чего бы начать?
У меня родилась идея посмотреть, как нейросети будут изображать песни и стихи. Разумеется, сейчас можно применять кучу различных апскейлов, улучшайзеров, ControlNet, inpaint, LoRa и вот это все. Но так не интересно. Хочется проверить, насколько нейросети умеют дословно следовать промту, ну и в целом - что получится без лишних "свистелок".
В постах данной рубрики я буду выкладывать несколько картинок, сгенерированных разными моделями на основе Stable Diffusion, а в конце прикладывать текст песни либо стихотворения, который послужил основой.
Иногда буду немного отходить от такой структуры, но не слишком. Важный нюанс - текст будет на русском, разумеется, но вот нейросетям я буду скармливать его машинный перевод на английский, т.к. не все сетки понимают русский язык, увы.
Настройки указывать не буду, для разных моделей они будут разные, да и соревновательной цели у меня нет - будем выбирать то, что покрасивее да поинтереснее.
Песня "Кукла с человеческим лицом", Пикник
Текст песни:
Мир как будто надвое расколот,
За витрины голубым стеклом,
Тихо плачет манекен бесполый,
Кукла с человеческим лицом.
Просит одинокими ночами
Просит он у неба одного:
Чтоб огонь от искры изначальной
Разгорелся в сердце у него.
Чтобы было сладко,
Чтобы было больно,
Чтобы каяться потом.
Вот и плачет манекен бесполый,
Кукла с человеческим лицом.
Станет он Перекати-поле,
Станет ждать, чтоб жар надежды стих.
Чтоб одну стеклянную неволю
Разменять на тысячу других.
А пока он тишиною скован
За витрины голубым стеклом,
Тихо плачет манекен бесполый,
Кукла с человеческим лицом.
Что ж, задачка оказалась не тривиальной - обойтись минимумом настроек, таких как сэмплер, количество шагов, CFG, и самый минимум в негативном промте.
Посмотрим, что будет получаться с другими произведениями. До встречи!