Lebruns far, som sannsynligvis var av belgisk avstamming, var oboist, og det finnes dokumentarisk belegg for at han arbeidet ved hoffet i Mannheim fra 1764. Samme år opptrådte den tolvårige Ludwig August Lebrun med hofforkesteret til kurfyrst Karl Theodor av Bayern. Fra 1767 var han fullverdig orkestermedlem.