Seu pai foi designado pouco depois para o Exército Austro-Húngaro na ocupação do norte da Itália durante a Segunda Guerra de Independência Italiana. Os primeiros anos de Luís foram passados no norte da Itália ou nas casas de Alexandre em Hesse: o Castelo de Heiligenberg em Jugenheim e o Palácio de Alexandre em Darmstadt. Ele conversava com sua mãe em francês e também tinha uma governanta inglesa, dessa forma crescendo falando três línguas diferentes.