Goya tilbragte mesteparten av sin barndom i Fuendetodos, hvor faren var gullsmed og jobbet med å forgylle gjenstander av tre og metall. Til tross for at de levde i fattige kår, var det blant landadelen en forakt for kroppslig arbeid uansett hvor fattige de var. Goyas familie levde antagelig i fattige kår. I 1749 kjøpte familien et hus i byen Zaragoza hvor de senere flyttet.