Иван Сергеевич родился в Кемеровской области 7 ноября 1948 года. Чуть позже семья переехала в Красноярский край. Борьба в то время в Сибири была ещё не сильно популярна, особенно в сельской местности. Поэтому Иван увлекался футболом, а поскольку был от природы крупным, друзья всегда норовили поставить его в ворота. После школы он поехал учиться на шофёра в Абакан, а по вечерам продолжал играть в футбол за местный мясокомбинат. Там его впервые и заприметил тренер по борьбе Владимир Чарков. У него Ярыгин приступил к первым тренировкам на борцовском ковре...