Адольф Камилли родился 23 апреля 1907 года в Сан-Франциско. Его отец, Алеццио, переехал в США из итальянской провинции Анкона в 1899 году. Со своей будущей супругой Альбеной Тацци он познакомился в городе Айрон-Маунтин в Мичигане. После землетрясения 1906 года их семья переехала в Калифорнию вместе с другими рабочими, задачей который было восстановление города. У Дольфа был старший брат Франческо, который был боксёром и скончался в 1930 году от кровоизлияния в мозг после нокаута в одном из боёв.