В феврале 1823 года молодой человек поселился в Тофт-Хилле, небольшом шахтерском и сельскохозяйственном поселке в Южном Дареме, Англия. Несмотря на то, что он носил внушительное имя «Джозайя Чарльз Стефенсон», вскоре все прозвали его «Джо Пайкер». Зимой Джо добывал уголь, а летом работал на ферме. Он никогда не рассказывал ни о том, откуда он родом, ни о своей прежней жизни, но поскольку он был полезным гражданином, не доставлявшим никому хлопот, соседи не видели причин выпытывать у него информацию. Джо держался как можно дальше от своих товарищей по работе, и хотя у него не было друзей, врагов он тоже не нажил. Через год после приезда в Тофт-Хилл Джо женился на Салли, симпатичной и приветливой служанке из деревенского трактира. У пары не было детей, но они были очень дружны и довольны друг другом и своим простым, скромным существованием. После женитьбы Джо бросил работу на шахте и нашел подработку на соседних фермах. В общем, их с Салли можно было назвать одними из самых удачливых жит