Descendiente de una larga línea de pintores flamencos, Huysmans tuvo una juventud dolorosa (su madre se volvió a casar con un hombre de negocios, protestante: Jules Og).