Zum Saisonauftakt 1936 gewann er überzeugend vor den Weltmeistern Rudolf Rominger und Émile Allais den Grand Prix von Megève und zählte damit auch zu den Favoriten bei den bevorstehenden Grossereignissen. An den Olympischen Spielen durfte er jedoch wegen seiner Tätigkeit als Skilehrer, die er nebenher betrieb, nicht teilnehmen. Dafür hielt er sich mit der Silbermedaille in der Alpinen Kombination hinter Rominger und dem dritten Rang im Abfahrtslauf bei der alpinen Skiweltmeisterschaft in Innsbruck schadlos. Im selben Jahr belegte von Allmen auch den zweiten Rang in Abfahrt, Slalom und Kombination bei den Arlberg-Kandahar-Rennen in St. Anton und den zweiten Rang in der Viererkombination in Davos. Im darauf folgenden Jahr wurde er Schweizer Abfahrtsmeister in Les Diablerets mit neun Sekunden Vorsprung auf Willy Steuri, Schweizer Skimeister in der Viererkombination und gewann vor Rominger erneut die Kombination im Wengener März-Skirennen.