Walter Trail）在十四世纪末重建了城堡。大约在1400年，新城堡完工，翌年特里尔主教在城堡内去世。今天人们能见到的城堡的基础就是特里尔时代打下的。
宗教迫害.在接下来的数年内，城堡内住过一些重要人物。1410年，詹姆斯一世国王在曾于此师从圣安德鲁斯大学的创立人亨利·瓦德洛主教（Bishop Henry Wardlaw）。詹姆斯二世也曾由詹姆斯·肯尼迪主教（Bishop James Kennedy）。詹姆斯三世就出生在城堡中。在作为国王住所的这些年间，城堡也是一个臭名