På sine tannlegereiser i Gudbrandsdalen begynte han fra 1887 å samle gamle gjenstander, som han stilte ut i sitt venteværelse. I 1894 kjøpte han sitt første gamle hus, Lykrestua fra Skjåk, som ble flyttet ned til Lillehammer og gjenreist i hans hage. Fram til 1902 fikk han flyttet i alt seks bygninger, og han solgte samlinga til Selskapet til Lillehammer bys vel. Samlinga ble flyttet, og åpnet i 1904 på Maihaugen under navnet «De Sandvigske Samlinger».