農民反乱中の1381年、ジャック・ストローは、ホスピタル騎士団の「富と高慢に激怒する」2万人の暴徒を指揮して、この荘園屋敷を破壊した。当時の教会長であるは、ロンドン塔に逃げ込んだものの捕らえられ、タワー・ヒルで打ち首に遭っている。ジャック・ストローと彼に従った数人は、ハイベリーを一時的な本部として使い、屋敷は捨てられた後も500年間『ジャック・ストローの城』（）として知られることになった。なおハムステッドのホワイトストーン・ポンドにも、同じく彼の名前から名前が取られた『ジャック・ストローの城』が存在する。以前はパブ、現在ではフラットとして使われており、『ジャック・ストローの城』としてはこちらの方が知名度が高い。