Lattorff besuchte zunächst das Kadettenhaus in Dresden und trat 1747 als Gefreitenkorporal in das Infanterieregiment „Prinz Heinrich“ der Preußischen Armee ein. Dort avancierte er bis Ende September 1755 zum Sekondeleutnant. Während des Siebenjährigen Krieges kämpfte Lattorff bei Lobositz, Reichenbach, Prag, Kolin, Breslau, Leuthen, Kunersdorf und Torgau. Bei Kolin und Kunersdorf wurde er verwundet. Bei der Belagerung von Olmütz erhielt er den Orden Pour le Mérite, nahm aber auch an den Belagerungen von Schweidnitz und Breslau teil. Er stieg während des Krieges bis Mitte Dezember 1762 zum Hauptmann und Kompaniechef auf.