Denne planen ble aldri gjennomført, og da Robert II av Skottland overtok den skotske tronen ble William uansett forsont med kongen og ble justiciar for sydlige Skottland. De siste årene av hans liv ble tilbrakt ved å gjøre raid over grensen til England og slå tilbake engelske angrep den andre vegen. Han døde ved Douglas i mai 1384 og etterlot seg en sønn, James, som etterfulgte ham som jarl. I tillegg hadde han datteren Isabel, som ble hertuginne av Mar i eget navn.