Строительство замка началось в 1866 году по проекту английского архитектора Эдварда Милнера. Замок был задуман как летняя резиденция семьи Liedekerke De Beaufort. Однако архитектор скончался до окончания постройки и замок достраивался уже без него. Окончание строительства произошло в 1907 году. В 1950 году «Замок Миранда» получил новое название «Замок Нуази» и поступил под управление Министерства