Den dag i dag står Peel Castle utenfor Peel, i dag av stein, men første gangen hurtig bygd med trestolper i den naturlige omkretsen som øya ga. Utgravninger i 1947 har avslørt hulrom fra trestokkene. Selve navnet Peel synes å være avledet fra pæler. Festningen var en nødvendighet, både for å kunne kontrollere befolkningen og for å sikre et trygt sted. Lokale historikere mener at det som i dag er middelalderfestningen Castle Rushen i Castletown, som senere ble øyas hovedstad fram til moderne tid, ble også første gang reist av kong Magnus på tilsvarende vis som på Rothesay. Festningen lå på et strategisk sted der den kunne vokte og beskytte munningen til elven Silverburn River.