Искусственный интеллект позволяет превращать текст в реалистичные проекты зданий, но существующие модели часто неточно воспроизводят заданные параметры, например, могут ошибиться в количестве этажей из‑за недостатка подробных аннотаций в обучающих данных. Исследователи из Японского института передовых наук и технологий совместно с коллегами из Тяньцзиньского университета разработали улучшенную систему генерации изображений. Она дополняет текстовые подсказки данными из внешних архитектурных наборов, благодаря чему модель опирается на реальные примеры. Система имитирует рабочий процесс архитекторов: сначала преобразует текстовый запрос в простой эскиз с правильной этажностью, затем уточняет его, добавляя детали (окна, двери, элементы фасада) из базы данных реальных строительных компонентов и, наконец, объединяет уточненный эскиз с исходным описанием — получается реалистичное изображение, точно отражающее замысел. Для тестирования создали три набора данных: 2 200 изображений строительн