Da den faste bosetningen opphørte, ble flere av bygningene plukket fra hverandre og flyttet inn til fastlandet. Flere av husene i Larkollen i dag er således gamle Eldøy-bygninger.