Ludvig O. Bauer var sønn av en lokomotivfører, Lars Olsen Bauer, og begynte selv ved jernbanen som ung gutt i 1882.