Компания «Яндекс» представила диффузионную нейросеть Yandex AI Rendering Technology (YandexART) для создания изображений и анимации по текстовым запросам пользователей
Как сообщает пресс-служба «Яндекса», нейросеть понимает российский культурный код — знает известные места и города, выдающихся личностей разных эпох и знакомых с детства персонажей мультфильмов и сказок. YandexART уже интегрирована в приложение «Шедеврум» и помогает иллюстрировать рекламные объявления в «Яндекс Бизнесе», а скоро она появится в «Клавиатуре» и других сервисах.
YandexART генерирует изображения и анимацию методом каскадной диффузии — сначала нейросеть создает картинки в соответствии с запросом, а затем поэтапно увеличивает их разрешение и детализацию. По сравнению с предыдущим поколением диффузионной модели, которая использовалась в «Шедевруме», новая нейросеть создает более реалистичную и детализированную графику.
Для улучшения работы нейросети разработчики увеличили размер обучающего набора данных в полтора раза — до 330 миллионов картинок с текстовым описанием. Для улучшения качества генерации используется дообучение с подкреплением. В «Шедевруме» YandexART помогает пользователям генерировать изображения и видео, а при создании рекламных объявлений в «Яндекс Бизнесе» можно выбрать подходящую иллюстрацию.
Здесь мы рассказываем про основные методы обработки изображений нейросетями:
«Яндекс»