Le Roux was ’n seun van Johannes Smith (4 September 1886 – 2 April 1954), ’n skilder en kunsresensent, kunsredakteur van 'n koerant en verslaggewer. Sy moeder was Annie Elizabeth le Roux; vandaar sy kunstenaarsnaam. Sy vader het as skoolseun van nog nie 15 jaar oud nie besluit om tydens die Driejarige Oorlog teen die Britse owerheid te rebelleer. Een nag ontsnap hy uit die beleërde Aberdeen onder geweervuur. Eers sluit hy by kmdt. Gideon Scheepers se kommando aan en veg later onder genl. Wynand Malan. Op 3 Julie 1902 is hy as sestienjarige skolier aan hoogverraad skuldig bevind en gevonnis. Hoewel vrede op 31 Mei 1902 gesluit is, is die Krygswet nie voor 16 September 1902 finaal in Kaapland opgehef nie. Sy doodsvonnis vir hoogverraad (omdat hy as inwoner van die Kaapkolonie teen die Britse owerheid gerebelleer het) is later versag tot lewenslange verlies van stemreg. Hy het sy herinneringe aan die Driejarige Oorlog te boek gestel in "Ek rebelleer", wat in 1939 uitgereik is.