Am 2. September 1774 kam es zur Bildung eines Mobs, der von britischen Truppen gehört hatte, die von Boston her im Anmarsch seien. Oliver eilte nach Boston und sprach dort mit General Thomas Gage, der ihm bestätigte, dass derartige Truppenbewegungen weder stattfanden noch geplant waren. Obwohl Thomas Oliver dadurch wahrscheinlich einen Kriegsausbruch in Cambridge – 7 Monate vor den Gefechten von Lexington und Concord – verhindert hatte, wurde sein Haus von den wütenden Menschen umstellt, die seinen Rücktritt forderten. Oliver beugte sich dem Druck, trat zurück und zog wenige Tage später aus seinem Haus aus.