В скандалах Алексей Дмитриевич замечен не был. Настоящий актер, человек искусства - считал, что его призвание - блистать на сцене, а не на страницах светской хроники. К тому же, человеком Жарков был скромным, трудолюбивым. Родился будущий актер в Москве 27 марта 1948 года в простой многодетной семье, кроме него родители воспитывали его брата и сестру. Отец прошел Великую Отечественную войну, работал плотником, а мама трудилась бухгалтером. Все трое детей занимались в творческих кружках Дома пионеров. Алексей, в частности, посещал занятия по риторике и сценической речи, мечтал на аккордеоне, но приобрести инструмент родители смогли не сразу – не хватало денег. Только через несколько лет парню купили инструмент, который он быстро освоил. После школы Алексей Жарков поступил в Школу-студию МХАТ на курс педагога Александр Карева, который в разные годы обучил Галину Волчек, Леонида Броневого, Ирину Скобцеву, Игоря Квашу и Всеволода Шиловского. С дипломом актер поступил на службу в Театр имен