Ludvig var sønn av Vladislav II, konge av Böhmen og Ungarn. Etter farens død ble Ludvig adoptert av den mektige tyske keiseren Maximilian I.