Построена в 1816 году. На самом деле раньше, но пожар 1812 года уничтожил предыдущие строения. Тогда прапорщик Хрущев на фундаменте возвел новое здание в стиле ампир.
В 1860-м усадьба переходит к штабс-капитану Селезневу. Его дочь в 1906 году передала усадьбу Московскому дворянству для создания школы-интерната. После 1917 года в помещениях разместили коммунальные квартиры. С 1924 года в главном здании разместился Музей игрушки. В 1940-м усадьбу передали в ведение Государственного литературного музея.
В 1949-м в здании состоялась первая выставка посвященная творчеству Пушкина, а в 1961-м году здесь официально открылся музей, посвященный творчеству поэта. В 1996 году провели масштабную реставрацию особняка. В 1999 году главное здание и ближайшие постройки объединили стеклянным куполом.
Про другие усадьбы Москвы: