Joseph Brunini var sjette barn til John og Blanche ( Stein) Brunini. John Brunini var sønn av italienske immigranter og var advokat, og grunnla advokatfirmaet ; Blanche Brunini var jødisk.