Иван Дмитриевич Якушкин женился на Анастасии Васильевне Шереметьевой в конце 1822 года. В 1823 году (но в некоторых источниках в 1824) у них рождается первенец, которого родители нарекли Вячеславом. Вячеслав был первым, а значит любимым ребёнком в семье. Он, в отличие от брата Евгения, застал отца вне каторги, хотя и не мог его хорошо помнить, ведь был младенцем. Ребёнок занимал важное место в жизни супругов. Это видно хотя бы в том, что Вячеслав в полтора года мог под руководством родителей выводить несколько строк...

Евгений Иванович Якушкин родился 13 февраля 1826 года, то есть примерно через месяц после ареста отца. Мать - Анастасия Васильевна Якушкина хотела отправиться за мужем в Сибирь, но Иван Дмитриевич Якушкин запретил ей. Таким образом, маленький Женя за всё детство ни разу не видел отца, но мать привила любовь и уважение к нему и идеям, за которые он выступал. Анастасия Васильевна сама занялась образованием детей. Но позже она решила переехать в подворье Троице-Сергиевой Лавры. Там же и продолжилось образование детей...