La casa fue construida por Sir John Thynne, y diseñada principalmente por Robert Smythson, después que el convento que estaba en el mismo lugar fuera destruido por un incendio en 1567.