Йосип Йоганн Адам в ранньому віці проїхав через всю Італію, прямуючи до свого батька в Іспанію, де недовго служив в імператорській армії та брав участь у війні за іспанську спадщину. У складі армії герцога Мальборо воював проти французів.