В сентябре 1900 года в газете «Терские ведомости» появляется объявление: «в Пятигорске при Городской управе должность городского архитектора остается вакантной. Управа просит лиц, имеющих право на производство строительных работ и желающих занять означенную должность, заявить об этом в письменном виде». В конце 1901 года на эту должность был принят архитектор Сергей Ильич Гущин.
Он родился 28 марта 1858 года в г. Таганроге в многодетной купеческой семье. Идя по стопам старших братьев – архитекторов, после окончания коммерческой гимназии Сергей поступает на архитектурное отделение Московского училища живописи, ваяния и зодчества. По окончании училища за отличную учебу Гущин был награждён поездкой в Италию. Затем работал в Москве, дважды назначался городским архитектором Ейска. С 1887 по 1899 год был городским архитектором Таганрога.
Приверженец «кирпичного» стиля, С. И. Гущин за шесть лет работы в Пятигорске построил немало: здание городской думы (пр. Кирова, 68), крытый Городской рынок (не сохранился), здания монастырского подворья (пр. Кирова, 90), приходское училище (ныне школа № 2), собственный дом (не сохранился) на ул. Крайней (ныне ул. Чкалова). Одно из красивейших зданий города – отель «Эрмитаж» (ул. Гоголя, 1) построено в 1908 году, а великолепная дача «Эльза» – одно из лучших строений того периода. Украшением города является здание кофейни (парк «Цветник»), возведенное по заказу известного кондитера А. А. Гукасова.
По проектам зодчего было построено около двухсот частных домов и дач. Возводились здания из желтого местного кирпича с применением машукского камня в фундаменте и для отделки дверных и оконных проемов.
Часть проектов не была реализована, часть зданий безвозвратно утрачена, некоторые требуют ремонта. Но и сегодня старинные здания, созданные по проектам талантливого зодчего Сергея Ивановича Гущина являются украшением Пятигорска.