Der Neuengland-Hurrikan von 1927 ließ den Black River über die Ufer treten, der in Lower Cavendish Village mehrere Gebäude, Garagen und Automobile beschädigte. Auch der Neuengland-Hurrikan von 1938 traf die Town. Tausende Bäume wurden umgeworfen und die Straßen blockiert. Eine weitere Flut traf Cavendish im Jahr 1973, die Straßen und Brücken beschädigte. Ein Tornado richtete im Jahr 2003 Schäden an und auch der Hurrikan Irene traf Cavendish im Jahr 2011 schwer.