Riddergården kalles en løkkegård fordi bygningsmassen, som består av en rekke selvstendige bygninger, ligger rundt et naturlig rektangulært gårdstun, som i seg selv ligger i et bymessig strøk. Gården ligger på Nordsiden i Hønefoss, der den opprinnelige bybebyggelsen vokste fram på 1700-tallet og framover, like ved Nordre torv. Det har vært vanlig å anta at byggingen tok til i begynnelsen av 1730-årene, men utvidelsen av bygningsmassen skjedde trolig først omkring 1780–1800. Det var Fredrik Ridder bygget ut stedet til det vi i dag kjenner som Riddergården.