Gården var opprinnelig en løkkeeiendom på Bymarken, på grunn som før 1629 hadde tilhørt gården Vøyen i Aker. Arealet var i 1837 300.000 kvadratalen eller ca. 117 mål, og løkken var en av de største på bymarken. Vøienvolden ble i 1683 overdratt som eiendomsgrunn til rådmann Johan Pettersen Bergmann som belønning «for sær umage hand har haft» i byens tjeneste. I hans tid ble det oppført fjøs og tre høyløer, men intet våningshus. Han oppførte derimot to leievåninger og anla to fiskedammer.