Milner døde i Sturry Court nær Canterbury den 13. mai 1925 av sovesyke. Hans vicomte-tittel døde ut med han, siden det ikke fantes arvinger.