Apple продолжает развивать свои технологии искусственного интеллекта и представила новый инструмент, который позволяет анимировать статичные изображения с помощью текстовых описаний. Инструмент называется Keyframer и основан на больших языковых моделях (LLM), способных генерировать анимации.
Keyframer позволяет пользователям создавать анимированные иллюстрации из масштабируемой векторной графики (SVG) с помощью подсказок на естественном языке. Например, пользователь может загрузить изображение космической ракеты и запросить три дизайна, где небо меняет цвет, а звёзды мерцают. Keyframer сгенерирует анимационный код CSS, который можно доработать, редактируя его или вводя дополнительные подсказки.
Apple утверждает, что Keyframer даёт пользователям больше творческого контроля и гибкости, чем другие системы преобразования текста в изображение, такие как Dall-E и Midjourney, которые требуют полного описания дизайна в одной подсказке. Keyframer же позволяет итеративно создавать и уточнять проекты с помощью последовательных подсказок.
Apple описывает свою инновацию в новой исследовательской работе под названием Keyframer: Empowering Animation Design Using Large Language Models [PDF].
В работе также приводятся результаты интервью с профессиональными дизайнерами и инженерами-аниматорами, которые оценили скорость и качество работы Keyframer. Один из участников исследования сказал, что Keyframer сэкономил ему часы работы.
Keyframer – это не единственный прорыв Apple в области ИИ. Ранее компания представила ИИ-модель, которая может редактировать изображения на уровне пикселей с помощью мультимодальных LLM. Кроме того, Apple сообщила, что смогла развернуть LLM на iPhone и других устройствах с ограниченным объёмом памяти, используя флеш-память.
По слухам, Apple планирует внедрить функцию генеративного ИИ на iPhone и iPad к концу года, вместе с выходом iOS 18. Эта функция может улучшить работу Siri и дать пользователям возможность создавать различный контент с помощью ИИ, подобно ChatGPT. Это может стать самым большим обновлением в истории iPhone.
Ещё по теме: