Sinds de Normandische tijd stond er een kasteel in Abercorn, maar dit werd in 1455 door Jacobus II van Schotland ontmanteld tijdens de belegering van de "zwarte" graven van Douglas.