Det gikk mange rykter om at Brasillach var homofil, og andre intellektuelle fascister som Louis-Ferdinand Céline og Pierre Drieu la Rochelle brukte dette for å fornærme ham. Bardèche og Brasillach ble av en studiekamerat kalt «brasillèche et bardache» (på fransk betyr å slikke, og gutteprostituert). Under den tyske okkupasjonen hadde han en tett forhold til et medlem av den tyske administrasjonen, Karl-Heinz Bremer, og var utrøstelig da han senere falt på Østfronten. Det er ikke mulig å si noe avgjørende om dette, men hvis ryktene stemmer kan det delvis forklare Brasillachs vei mot fascismen: En beundring for den nazistiske maskuliniteten og mektige menn som også går igjen i mye av skrivingen hans.