1863 efterträdde han lord Elgin som vicekonung och innehade denna värdighettill