På Buøya ligger vært i Sverdrup-slekten helt tilbake fra 1830-tallet, da Buøya ble kjøpt av Peter Jacob Sverdrup som blant annet drev med gårdsdrift, butikk, samt kjøp og salg av fisk på stedet.