Han overtok i 1863 Eide gård (på Skjolden i Luster kommune) som faren hadde kjøpt. Eide var et av de største brukene i Luster og hadde på det meste 26 husmannsplasser. Moren solgte i Nedre Sulheim til Rolv Andvord i 1862 og hele familien flyttet til Luster. Torgeir Sulheim var sentral i tindebestigning i Jotunheimen, og var med på flere førstebestigninger.