Nordre Sandøy var hjem til en god del familier i en flere hundre år lang periode, men på grunn av Hvalers sterke nedgang i fiskevirksomhet var det flere som valgte å flytte til fastlandet. Både tidligere hus til fastboende og et mylder av nye hytter er nå bebodd av sommergjester rundt om på øya.