Forleddet i navnet Sommarøya vitner om sesongvis bruk av plassen, og historikeren Håvard Dahl Bratrein har påvist at nordmenn i 1611/12 betalte ei spesiell avgift til kongen. Denne avgifta ble kalt husfrelse (ei tomteavgift), og den ble betalt for både Hillesøya og Sommarøya. Bratrein tolker det slik at stedene der det blir betalt slike avgifter, har vært brukt og eid av samer, i dette tilfellet av fjordsamer fra Malangen. Sommarøya og andre namn på «Sommar», kan ha vært en del av det Bratrein kaller for den todelte samiske gården med et sommer- og et vinterbosted.