Nacido en Alemania, Astor emigró a Inglaterra cuando era adolescente y trabajó como fabricante de instrumentos musicales junto a su hermano mayor George Astor.