作为苏格兰国王罗伯特一世（Robert the Bruce）的忠实拥趸，威廉·兰伯顿（William Lamberton)主教重回城堡并将其重新修复。在十四世纪30年代，英格兰人重夺了城堡，并在1336年加强了它的防卫。英格兰人最终没有成功守住城堡。在大卫二世（David II)幼时摄政的安德鲁·莫雷爵士（Sir Andrew Moray）带兵包围了城堡三周之久，并且攻下了它。 在1336年到1337年间，因为担忧英格兰人卷土重来，苏格兰人索性将城堡拆毁。之后的数十年里，城堡仍旧是废墟。沃特·特里尔主教