Скромный двухэтажный дом на улице Валовой вряд ли обратит на себя внимание случайного прохожего. Однако этот особняк некогда был королевским замком и видел немало знатных особ. Его возвели в середине XIV века не только как резиденцию Казимира Великого. Он также служил домом для приходского священника, был местом для сборов городского совета, то есть выполнял функции ратуши, а также входил в систему оборонных укреплений Радома. Во время шведского «потопа» местный замок был серьезно поврежден. Его восстановили, но он уже никогда не был столь востребован, как во время правления Ягеллонов. Здесь останавливался королевский двор во время путешествия из Кракова в Вильнюс и обратно.
Радомский замок играл большую роль не только в жизни города, но и всей страны. Он был свидетелем многих исторических событий. Здесь не раз собирались сеймы. На одном из них в 1383 году Ядвига Анжуйская была выбрана королевой Польши. В 1401 году тут была заключена IIольско-литовская уния. Об этом событии напоминает мемориальная доска, помещенная на стене королевского замка со стороны сквера Виленско-Радомской унии. Во времена правления Казимира IV в замке бывали многие высокопоставленные гости, в том числе татарский хан, король Богемии, герцог Баварии, великий магистр Тевтонского ордена Ян фон Теффен. В 1505 году при короле Александре Ягеллончике в замке Радома была подписана конституция Nihil novi. Она серьезно ограничивала власть правителя.
В наши дни замок, который местные жители называют «Большим домом», принадлежит ксендзу костела святого Иоанна Крестителя. От некогда величественной резиденции сохранилось только продолговатое крыло высотой в два этажа.