Inntil midten av 1800-tallet lå hovedbygningen på Torgunrud omtrent femti meter nord for bygningskomplekset som utgjør dagens tun. Denne hovedbygningen ble solgt ved et skifte i 1879 (Sigvart Svenkeruds konkurs, se Eierskap, under). Huset ble plukket fra hverandre og delt i to. Det sies av den ene halvdelen ble flyttet og bygget opp som hovedbygning på bruket Hauen. Den andre delen ble fløtt over til østsiden av Mjøsa, og bygget opp igjen på Morskogen. Det finnes imidlertid bare muntlige kilder til denne delingen. Dagens hovedbygning på Torgunrud ble kjøpt fra en annen gård i bygda, Nordgarden Brodshaug, og reist i 1873. Dette våningshuset ble ca. 1930 av eier og bruker Ole Dahl utvidet, påbygget og modernisert etter tegninger av arkitekt Axel Bjørnstad. Hovedbygningen har siden vært modernisert og pusset opp i 1993 og 2005 mens arkitekturen fra 1930 er forblitt uendret.