Edvard II grunnla et karmelittkloster i Sheen etter nederlaget ved Bannockburn i 1314. Da Edvard III kom til makten i 1327 ga han huset til sin mor Isabella. Etter hans kones død neste femti år senere brukte han mer enn 2000 pund på oppussing av huset, noe som var en stor sum i datidens pengeverdi. Han døde selv på herregården før arbeidet var ferdig, i 1377. Under hans tid, i 1368, hadde Geoffrey Chaucer gjort tjeneste som i Sheen.