Zusammen mit dem Schweizer Rennfahrer Peter Staechelin gründete Fischer daraufhin mit der Ecurie Espadon ein eigenes Rennteam, das die Saison 1951 mit zwei Formel-2-Rennwagen von Ferrari bestritt. Für Formel-1-Einsätze stand aber auch ein V12-Motor von 2560 cm³ Hubraum zur Verfügung, der wahlweise in eines der Autos eingebaut werden konnte. In der Formel 2 holte sich Fischer damit Siege in den Rennen von Aix-les-Bains und Angoulème sowie den Tagessieg beim Bergrennen am Schauinsland im Schwarzwald. In der Formel 1 erzielte er Podestplätze in Siracusa (3. Platz), San Remo (3. Platz) und Bordeaux (2. Platz). Beim Weltmeisterschaftslauf zum Großen Preis von Deutschland auf dem Nürburgring verfehlte er auf dem sechsten Platz knapp die Punkteränge. Am Ende der Saison wurde Fischer Schweizer Rennwagenmeister.