Здание было построено в 1864 году. Было известно на всю Москву тем, что в нем располагался ресторан Эрмитаж, которым владел кулинар Оливье - изобретатель знаменитого салата. Первое назначение было - размещение трактира с гостиницей и банями. Во времена знаменитого ресторана, здесь собиралась вся московская знать, а ежедневная выручка составляла 2000 руб. - бюджет богатого города. В 1917 ликвидировали как признак буржуазии и разместили в здании миссию Американской администрации помощи голодающим...

Если верить знаменитому исследователю московской старины Гиляровскому, богатый купец Яков Пегов и известный повар-француз Люсьен Оливье, часто встречались у будочника на Трубной площади, торговавшим качественным нюхательным табаком...