Han ble født på gården Li i Haus prestegjeld som sønn av gårdbruker Eirik (Erich) Andersen Vaksdal og hustru Ågota Johannesdatter Dale, som begge kom fra Vaksdal. Han ble døpt Anders Lie. Han var i fireårsalderen da familien utvandret til Amerika. De slo seg ned på en gård i et område med mange andre norsk-amerikanere i Dane County i Wisconsin.