Сын известного генерала революционных и наполеоновских войн Максимилиана Байе фон Латура (1737—1806). Получил образование в Терезианской академии и в Инженерной академии, в 1799 году поступил обер-лейтенантом в инженерный корпус, принял участие в войне с Францией, сражался при Маренго.