A mediados de 1943, la esposa de Leonid, Liuba Jrushchova, fue arrestada por acusaciones de espionaje y sentenciada a cinco años en un campo de trabajo y su hijo (de otra relación), Tolya, fue colocado en una serie de orfanatos.