Under krigen med England 1807-1814 ble det dårlige tider. Mange av de gamle familiene som hadde holdt til på Svinør flyttet nå fra stedet. Nøytralitetsvakter bodde i hus i Svinør, og bygde opp kanonstilling utenfor et hus og man mener også at noen av bryggene ble bygd av soldater på den tiden.