Ved slutten av 1700-tallet var Frogner etablert som et av de største gårdsbrukene i landet med rundt 2 500 dekar dyrket mark og store skogsområder i Nordmarka, i nyere tid kalt Frognerseterskogen. Gården fikk sin herskapelige bebyggelse rundt tunet sør i Frognerparken i 1750-årene, etter at major Hans Jacob Scheel som den første av eierne bosatte seg der og rev de eldre bygningene. Hovedbygningen ble utvidet til sin nåværende størrelse av Bernt Anker i 1792. Bygningene har siden 1909 huset Oslo Bymuseum og fra 2006 Oslo Museum. Herskapsbygningene og parken med Frognerdammen er motivet i maleriet «Frogner Hovedgaard» (1842) av J.C. Dahl, et hovedverk i norsk nasjonalromantisk malerkunst.