Rundt Hønefossen var det stor sagbruksvirksomhet på 1700-tallet, og stedet der Riddergården ligger er alminnelig kjent som utbygget av sagfogd Fredrik Ridder, men han var ikke opphavsmannen til plassen. Fredrik Ridder ble gift med Maren Flattum, hvis onkel anla gården. De arvet gården, som da het da Flattumgården, etter sagfogd Anders Hanssøn Flattum. På den tiden fantes det bare et par hus der, hvorav det ene var ei skjenkestue (datidens vertshus eller pub), som ifølge Riksantikvaren trolig er synonym med drengestua (den eldste av bygningene).