Особняк в Гранатном переулке был построен в 1896-м году на месте старой усадьбы Николая Сабурова. Интересно, что на тот момент времени земля под будущим особняком считался самой дорогой в столице. Позволить себе такое роскошество смогли супруги Анна и Робер-Нильс Леманы, под чьей фамилией дом место известно до сих пор. И они же пригласили архитектора Адольфа Эрихсона для проведения полной перестройки своих владений.
Проект получился стилизованным под готику, но непростую – с влиянием Тюдорского стиля. Сохранились чертежи Эрихсона, согласно которым изначально главное здание планировалось куда более тяжеловесным, но по ходу строительства детали изменялись, и так получилась классическая воздушная конструкция, характерная для выбранного стиля.
Много внимания было уделено интерьерам, каждая комната имела собственный стиль – готический, барокко или рококо. И их внешний вид благодаря стараниям реставраторов удалось сохранить до наших времен.
В 1917-м году особняк перешел в собственность государства, какое-то время там располагались штаб Реввоенсовета и канцелярия посольства Франции, а в 1930-х – Союз архитекторов. Уже в 1990-е там начали проводить торжественные мероприятия, и с тех пор ничего не менялось. Для свободного посещения особняк открыт в Дни культурного наследия Москвы.