Амхерстский колледж
Колдуэлл родился в Лоуэлле, штата Вермонт. В 1855 году он окончил Амхерстский колледж и переехал в Мэн, где стал старшим учителем Академии Вашингтона в городе Ист-Мачайас.