Su padre, Erich Klossowski, un destacado historiador de arte, y su madre Elisabeth Dorothea Spiro (conocida como Baladine Klossowska) eran parte de la élite cultural de París.