Сарджент родился в Джерси-Сити, штат Нью-Джерси, в семье итальянских иммигрантов. Во время Второй мировой войны он служил в армии и участвовал в «Битве за Выступ» (Арденнской операции).