Miller was educated at home by his mother until the age of nine, when he attended the newly established East Poultney District School.
Miller dokuz yaşına dek evde annesinden eğitim gördü, daha sonra da yeni kurulmuş olan Doğu Poultney Bölge Okulu’na yazıldı.