Grefsheim Gård ble første gang nevnt i skrifter i 1313. I 1450 var gården eid av Sigurd Skaktavl. Samme året gifta han seg med Magnhild Oddsdatter Finnen. Etter Sigurds død i 1457 blir Magnhild gift med riksråd Alv Knutsson (1420–1496 ) av adelsslekten Tre Rosor. Gården ble dermed en setegård for norsk høyadel. Sønnen, Knut Alvsson (1455–1502) overtar, men blir drept på Akershus av Henrik Krummedike.