Найти тему

Блеск и нищета нейросети «Кандинский».

Каюта капитана звёздного катера по версии нейросети Кандинский
Каюта капитана звёздного катера по версии нейросети Кандинский

В прошлой статье я показал, что ChatGpt может генерировать художественные тексты, тем более, если их хорошенько обработать напильником. С «Кандинским» он же fusionbrain.ai, такой фокус провернуть уже много труднее.

Во-первых, кто будет «дорабатывать напильником»? Если человек сам художник, то всё довольно неплохо, а если человек не умеет рисовать на хорошем уровне? Тут всё сразу начинает «провисать». Потому, как словесно никогда не напишешь так как хочется со всеми деталями. А если напишешь, то он нормально не поймёт и сделает по-своему.

Хорошо бы конечно скормить ему какой-нибудь образец, и по этому образцу сделать конфетку. Но увы и ах, дорисовка у нейросетей работает намного хуже, чем рисование с нуля.

Например, вот я хочу сделать вот такой звездолёт, как на картинке, сделаный в майнкрафте. Естественно он по описанию не сможет сделать такой звездолёт, т.к. просто не поймёт, что оказывается кроме классических звездолётов может существовать довольно компактный, у которого все пушки впереди, да ещё и огромные иллюминаторы. Просто потому, что у него нет образцов подобного.

Такое никакой "Кандинский" не дорисует
Такое никакой "Кандинский" не дорисует

Сможете он сделать что-то подобное путём дорисовки? Нет тоже не сможет. Так как не поймёт, что перед ним звездолёт, а не хрущёвка с выступами. Хотя любой человек поймёт, что изображено, по крайней мере если ему дадут текстовое описание.

Может дать ему что-то полегче? Да, можно вот, например, пилотская кабина. Он таки прочухал, что впереди стекло. А перед стеклом приборная панель. Также распознал пол, потолок и стены. Но если присмотреться, между стенами и потолком крайне грязный стык? А почему? Потому, что, если настроить его перерисовать стык, он не поймёт, что стена — это стена, а потолок это потолок. Хотя сам же их и нарисовал. И начнёт рисовать полнейшую жесть. Даже когда на нарисованом диване потребовалось подравнять мелкие стыки он принял собственный же диван за нарисованную панель и увлеченно её дорисовал!

Было
Было
Стало
Стало

Вот ещё задание, итог которого виден на заглавной картине. Как видим, он хорошо распознал иллюминатор спереди (вернее его удалось заставить). Но очень плохо распознал двери и совсем не распознал кровать. при этом придумал на ровном месте человека. Это ещё удалось сгенерировать с одним. А там он упорно рисовал много людей, и раз за разом приходилось его закрашивать.

Было
Было
Стало
Стало

Так что смерть художникам от голода не грозила и никогда не будет грозить. Наоборот, именно художники получат хороший инструмент в свою копилку(если как-то решат проблему того, что они рисуют совсем в другом стиле, чем машина), тогда как остальным придётся довольствоваться поделками, лишь приблизительно изображающими то, что они хотят.