I 1435 ble festningen overtatt av Jakob I av Skottland og ble kongelig eiendom inntil det ble gitt til lord Elphhinstone i 1507. Festningen gikk videre fra Elphinstone til Erskine før det ble forlatt i 1716 som en følge av fiaskoen med jakobittopprøret.