Cuando Sverre tenía cinco años, la familia se mudó a las Islas Feroe para vivir con Roe, el tío paterno de Sverre, quien era obispo de las islas.