La Granjilla de La Fresneda fue trazada en el siglo XVI por Juan Bautista de Toledo, siguiendo un modelo muy similar al que este mismo arquitecto empleó previamente en la Casa de Campo de Madrid.