Apple показала, как искусственный интеллект может радикально улучшить ночные снимки на смартфонах — и особенно там, где обычные камеры и алгоритмы обработки уже бессильны. В новом исследовании компания рассказала о технологии DarkDiff, которая помогает «вытаскивать» детали из тёмных фотографий, не превращая их в мыльную кашу. Речь идёт о глубокой переработке самого процесса съёмки.
В темноте камера получает слишком мало света, из-за чего кадры выходят шумными. Чтобы спасти фото, смартфоны агрессивно сглаживают изображение, в результате чего теряются мелкие детали, текст становится нечитаемым, а лица выглядят как нарисованные. Apple признаёт, что такой подход — компромисс, который больше портит снимок, чем спасает его.
С DarkDiff инженеры пошли другим путём. Вместо того чтобы улучшать фото уже «после», они встроили ИИ прямо на этап обработки снимка внутри камеры. Алгоритм на базе диффузионной модели (родственной Stable Diffusion) анализирует сырые данные с сенсора и, опираясь на контекст сцены, понимает, какие детали действительно должны быть в тёмных участках. Важно, что система старается не «придумывать» лишнего, а восстанавливать структуру изображения максимально аккуратно.
На практике это выглядит так: стандартные этапы вроде баланса белого и базовой обработки выполняет обычный процессор камеры, а затем в дело вступает DarkDiff — он убирает шум и сразу формирует финальное изображение. В тестах Apple снимки, сделанные почти в полной темноте с короткой выдержкой, по детализации приближаются к фотографиям, снятым на штативе с экспозицией в сотни раз длиннее.
Однако технология пока далека до массового применения. DarkDiff требует слишком много вычислительных ресурсов и в текущем виде скорее подходит для облачной обработки, чем для работы прямо на смартфоне.