В 1805 году, когда Уильямсону было тридцать шесть лет, он приобрел землю в Эдж-Хилл. В то время она была необработанной песчаной пустошью, усеянной мелкими ямами, оставшимися после добычи песчаника. Он начал осваивать потихоньку эти земли. Вначале Джозеф построил для себя и своей жены большой просторный дом. После он разбил прекрасные сады на всей площади своих владений и построил множество новых домов. Земля около домов стала просаживаться и для поддержки садов Уильямсон построил арочные террасы, над которыми были расширены сады...