Команда исследователей из Huawei Bayer Lab и ETH Zurich представила WindowSeat — модель машинного обучения, способную удалять отражения с фотографий. Новая разработка ориентирована на решение распространенной проблемы любительской фотографии – нежелательные блики в стеклах при съемке из окон транспорта, через витрины или городских пейзажей. Удаление этих отражений вручную в фоторедакторах часто бывает трудоемким и малоэффективным. Основная сложность создания качественных моделей для удаления отражений заключается в отсутствии достаточного количества размеченных данных. Необходимы пары снимков – с отражением и без него, но отражения по своей природе динамичны и быстро меняются. Вместо поиска готового датасета, ученые создали его самостоятельно, используя фотореалистичные 3D-сцены в Blender. Особое внимание было уделено физически корректному воссозданию отражений с помощью шейдера Principled BSDF. В результате был сгенерирован набор данных из 25 тысяч изображений. Для обучения модели исс