El 25 de agosto de 1758 lideró a su ejército contra Federico el Grande en la Batalla de Zorndorf. La batalla causó grandes bajas a ambos bandos, tras lo que Fermor se retiró hacia el este. Fue más tarde relevado y subordinado a Pyotr Saltykov en 1759.