Arthur Tappans foreldre var kalvinister. Hans mor var grandnies av Benjamin Franklin. Arthur Tappan flyttet fra hjembyen Northampton til Boston da han var 15 år gammel.