Edward VI of England
Далее возникла традиция передавать замок в собственность королевским супругам. В середине XVI века он поочередно принадлежал трём из шести жён Генриха VIII — сначала Екатерине Арагонской, затем Анне Клевской и, наконец, Екатерине Парр. В 1551 году король Эдуард VI продал замок лорду Ричу, и он практически полностью был разобран на камни для других построек. От былого Хадли сохранились лишь развалины двух круглых трехъярусных башен.