Huset ble bygget i 1780, og var i bruk som prestegård inntil 1860. I 1917 oppdaget Tilla Valstad at hovedbygningen skulle rives. Hun satte i gang en innsamling, med tanke på å gjøre stedet til et museum for Bjørnson, og i 1919 ble gården overlevert til staten som en gave. I 1932 ble det avduket en minnestein over Bjørnstjerne Bjørnson på Bjørgan, og i den gamle bygningen er flere ting fra Bjørnsons tid samlet. Museet lå fram til 2006 under De Sandvigske Samlinger på Maihaugen, som også har ansvar for Aulestad. Bjørgan er nå lagt inn under Nordøsterdalsmuseet. Huset ble restaurert i 2010.