В январе 2021 года OpenAI представила DALL-E, нейронную сеть, которая может «использовать любой текст и создавать на его основе изображение». Прошел год и OpenAI представила обновленную версию предыдущей программы под названием DALL-E 2. Согласно сайту OpenAI , «DALL-E 2 — новая система искусственного интеллекта, которая может создавать реалистичные изображения и рисунки из описания пользователя».
На сайте компании представлено множество примеров работы ИИ, и они действительно впечатляют. Например, слова «космонавт», «верхом на лошади» и «в фотореалистичном стиле» создали изображение, которое дано выше.
Интересно, что система понимает, как и каким образом посадить космонавта на лошадь и что такое фотореалистичное изображение. OpenAI также заявляет, что «DALL-E 2 может вносить реалистичные изменения в существующие изображения согласно текстовому требованию, добавлять или удалять элементы, принимая во внимание тени, отражения и текстуры». Пример представлен ниже: в картину с мужчиной система по запросу добавила собаку, соответствующую по стилю, цвету и детализации.
Как работает система? OpenAI объясняет, что «DALL-E 2 изучил взаимосвязь между изображениями и текстом, используемым для их описания. Система использует процесс, называемый «рассеиванием», который начинается с узора из случайных точек и постепенно изменяет этот узор в сторону изображения, когда ИИ распознает определенные аспекты этого образа». Более того, политика в отношении контента OpenAI не позволяет пользователям создавать изображения с насильственными действиями, сексуальным или политическим подтекстом, среди прочих категорий, что делает программу безопасной для использования ее в том числе и несовершеннолетними пользователями.