Представляем нейросеть от Яндекса под названием "Шедеврум", которая способна создавать изображения на основе текстовых описаний. Эта нейросеть может обрабатывать запросы как на русском, так и на английском языках. "Шедеврум" также представляет собой своего рода социальную сеть для создателей нейроизображений. Кроме того, "Шедеврум" предоставляет возможность генерации текстов с помощью YandexGPT. Это означает, что можно написать короткую историю и затем иллюстрировать её в этом же приложении.
Метод, используемый нейросетью "Шедеврум" для формирования изображений, базируется на каскадной диффузии. Сначала она создает изображения в соответствии с запросом, а затем поэтапно увеличивает их разрешение, добавляя детали.
Первая версия генеративной модели была обучена на 240 миллионах примеров изображений с текстовыми описаниями в рамках бета-теста. В настоящее время продолжается обучение на наборе данных из 500 миллионов примеров, и качество будет постепенно улучшаться в последующих обновлениях.
Генерация изображений
Генерация изображений занимает примерно одну минуту, в зависимости от загрузки сервера. После этого приложение предлагает четыре варианта изображения, как Midjourney. Выбранное изображение можно опубликовать в ленте и сохранить. Без публикации этого сделать невозможно.
Нейросеть успешно воспроизводит художественные стили, однако она не достигает фотореализма. Несмотря на то что в новых версиях количество искажений и артефактов почти исчезло, по изображению все же заметно, что оно, хоть и фотореалистичное, но все же цифровое искусство.
В общей ленте все изображения публикуются с указанием имени автора. Другие пользователи могут лайкать ваши публикации, и наиболее популярные посты появляются в ленте.
Популярные пользователи имеют доступ к генерации четырехсекундных видео, однако эта функция еще не доступна для всех. Как получить к ней доступ, пока неизвестно.
Функция "ФИЛЬТРУМЫ"
Приложение "Шедеврум" не только создает изображения, но и стилизует фотографии, загруженные пользователями. Например, оно может преобразить человека на фотографии в вязаную игрушку или сделать изображение брутального кота романтичным. Это достигается с помощью "фильтрумов" - моделей нейросети YandexART, обученных в определенном стиле.
Некоторые из "фильтрумов":
- "Плюш" превращает центральный объект на фотографии в мягкую игрушку.
- "Неон" придает изображению сиренево-фиолетовый киберпанковый стиль.
- "Мульт" делает изображение похожим на аниме.
- "Пряжа" преобразует персонажа на фотографии в игрушку из ниток.
- "Кисть" перерисовывает фотографию в художественном стиле.
- "Цветы" придает изображению романтичный аниме-стиль с мягкими чертами лица.
Чтобы использовать "фильтрумы", пользователь может нажать на плюсик на главном экране приложения и выбрать нужный фильтр из меню. Если желаемый фильтр не отображается, рекомендуется обновить приложение до последней версии.
Важно отметить, что эффект работы фильтра может быть не всегда заметен или не соответствовать ожиданиям по качеству, поэтому иногда лучше выбрать другое изображение для обработки или попробовать несколько различных фильтров.
Некоторые изображения, после применения фильтров, изменяются почти незаметно, в то время как другие могут стать почти неузнаваемыми.
Примеры наших генерации с помощью "фильтрумов" можно посмотреть в плейлисте:
https://www.youtube.com/playlist?list=PLpWR3An76Y25RSGsLstsnFDkEU1LYN5bX
Функция генерации доступна только в мобильном приложении; на веб-сайте такая возможность отсутствует. На сайте можно только просматривать изображения других пользователей.
Шедеврум доступен как мобильное приложение для операционных систем Android и iOS. Чтобы установить приложение, вы можете загрузить его из магазина Google Play или App Store. После установки приложения вам потребуется войти через Яндекс ID или зарегистрироваться, чтобы получить доступ ко всем его функциям.
Больше примеров генерации можно посмотреть в наших каналах: