Ab 1960 fuhr Fischerkeller für den deutschen Rennstall Torpedo, war in diesem Jahr jedoch erfolglos. 1961 bestritt er fast alle großen Etappenrennen. Er begann im April mit der Deutschland-Rundfahrt, die er als Sieger beendete. Beim anschließenden Giro d’Italia wurde er unter 92 klassifizierten Teilnehmern 34. Schließlich nahm er auch an der Tour de France teil, schied dort aber vorzeitig aus. Auch bei der Straßen-WM 1961 musste er passen, wegen einer Erkrankung musste er seine geplante Teilnahme absagen.