En 1778 recibió una segunda baronía, la baronía de Amherst of Montreal, que tras su fallecimiento recayó en su sobrino William Pitt Amherst.