Taddeo Gaddi fikk fire sønner, tre av dem er kjente kunstnere: Giovanni Gaddi, Agnolo Gaddi og Niccolò Gaddi. Der er ikke noe som tyder på at hans fjerde sønn, Zanobi, var en seriøs kunstner.