Norge kontrollerte alle de ytre øyene som norsk skattland fram til 1266 da de ble avgitt til Skottland i henhold Perthtraktaten. Mull, Islay, og Kintyre hadde allerede blitt avstått til Skottland i 1156. Man ble avsondret fra de skotske øyene og i striden mellom Skottland og England kom Man inn under den engelske konge i 1334. De ble deretter holdt av de føydale herrene av Man (familien Stanley, jarlene av Derby, fra 1406 og fram til 1736, og av hertugene av Atholl fra 1736) inntil Man ble kjøpt av den britiske krone i 1765.