Im Ruhestand fungierte Lyttelton ab 1912 als Governor des Royal Hospital Chelsea, was er bis zu seinem Tod im Jahre 1931 blieb. Während des Ersten Weltkriegs saß er 1916/17 in einer Kommission, die die Führung der Kampagne in Mesopotamien untersuchte.