Höglund var den fremste av lederne i den marxistiske gruppen som ble ekskludert av Sveriges socialdemokratiska arbetareparti i 1917 og var med på å danne Sveriges socialdemokratiska vänsterparti, som skulle bli Sveriges første kommunistiske parti, og i en periode medlem av Komintern. Höglund, en god venn av Lenin, var det nya partiets førsta partileder i perioden 1917–1924. Höglund hyllet Lenin og oktoberrevolusjonen, men skulle senere fordømme stalinismen og den videre utviklingen i Sovjetunionen (dette framgår tydelig for eksempel i hans ledere i i forbindelse med offentliggjøringen av Molotov–Ribbentrop-pakten).