В начале 19-го столетия земельным участком и домом на этом месте владела генеральша Аграфена Петровна Глазова. Её супруг, генерал-майор Павел Михайлович Глазов, был героем второй турецкой войны, отличился в ряде сражений и был награждён орденом святого Георгия 4-й степени за храбрость при взятии Очакова. Затем эту усадьбу приобрел купец Константин Семёнович Попов. Он был выдающимся энтузиастом чайного дела и принадлежал к известной в России династии чаеторговцев Поповых. Основателем семейного дела был родной дядя Константина Семёновича - Константин Абрамович Попов. Из-за одинаковых имён этих двух чаеторговцев частенько путают:) По заказу нового владельца, на месте старого усадебного дома в 1879-м году архитектор Александр Иванович Резанов построил новый. Но уже в 1894-м его снова перестроили, так как хозяева опять сменились. Теперь владельцем стал фабрикант Михаил Абрамович Морозов. Он был успешным предпринимателем, меценатом и коллекционером. Происходил из известной династии Морозовых и приходился правнуком основателя рода Саввы Васильевича Морозова. По его заказу архитектор Виктор Александрович Мазырин построил красивое здание в стиле неогрек. Это одна из разновидностей так называемого «археологического классицизма», в основу которой легло следование образцам искусства Древней Греции. Снаружи усадьба имела классические черты, но внутри поражала неординарным убранством. Там была египетская парадная со сфинксами, саркофаг с мумией в прихожей, отделка в стиле античной Греции и пышного Востока.
Чета Морозовых была известна всей Москве. Михаил Абрамович был большим поклонником живописи, коллекционировал картины и помогал художникам. Его обширная коллекция хранилась здесь же, в особняке на Смоленском бульваре. А его жена, Маргарита Кирилловна Морозова, считалась одной из первых красавиц Первопрестольной. Она была предметом идеально-мистической влюблённости Андрея Белого, воспетой им во «Второй симфонии» и в поэме «Первое свидание». А ещё некоторые находили её черты в царевне-лебеди Врубеля. Но уж персонажем живописных полотен художников Серова, Бодаревского и Штемберга она точно являлась:) А ещё она была весьма деятельной особой: учредительница московского Религиозно-философского общества, хозяйка московского литературно-музыкального салона, владелица издательства «Путь», директор Русского музыкального общества - это всё Маргарита Морозова! Михаил Абрамович умер довольно рано и скоропостижно. Ему было всего 33 года. Тогда-то Маргарита Кирилловна и стала владелицей этой городской усадьбы. Но через семь лет после смерти супруга она её продала. А коллекцию мужа подарила Третьяковской галерее (западноевропейскую часть потом отдали в Эрмитаж и Пушкинский музей).
На короткое время хозяевами усадьбы стали фабриканты Ушковы. Династия Ушковых считается родоначальницей российской химической промышленности. Будучи выходцами из крестьянства, представители этой фамилии в короткие сроки смогли создать и развить крупнейшие в стране предприятия по выпуску химической продукции. Они одними из первых начали работать на отечественном сырье, владели хромовыми и марганцевыми рудниками, рудниками серного колчедана. На их заводах трудились многие выдающиеся российские и зарубежные учёные и инженеры, в том числе Дмитрий Иванович Менделеев.
Ну, а после октябрьского переворота особняк национализировали. Сначала здесь стал работать клуб Октябрьской революции. Потом были райком партии и филиал Дома пионеров. В конце советского периода особняк был закреплен за Верховным Советом СССР, а после его роспуска — за Управлением делами президента России. С 1993-го по 2015-ый годы здание арендовал банк «Российский кредит». А с 2017-го здесь размещается Российский институт стратегических исследований.