La casa de González de Clavijo en Madrid se ubicaba cerca de la Plaza de la Paja y con el tiempo pasaría a formar parte de las posesiones de la familia Vargas; en la actualidad todavía lleva el nombre de estos últimos.