I frykt for at noe skulle skje hans overlevende sønn Jakob fikk kongen gutten skjult i Dirleton Castle med muligheter til å få ham smuglet videre til Frankrike. En måned senere i 1406 klarte engelskmennene å ta unge Jakob til fange, og deretter dør kong Robert III, sannsynligvis i Rothesay Castle. Kongen skal etter sigende ha dødd av sorg over at hans sønn var blitt fanget. Han ønsket til og med å bli begravd under en møkkdynge med gravskriften: «Her ligger den verste av konger og den mest ulykkelige av menn.» Isteden ble han gravlagt ved Paisley og ikke ved Scone, det tradisjonelle gravstedet for Skottlands konger, ettersom han mente at han ikke var verdig denne æren.