Den 20. januar 1981 ble Rowland utnevnt av dronning Elizabeth II til guvernør i den australske delstaten New South Wales, der han erstattet Roden Cutler. Hans utnevnelse ble anbefalt av den daværende australske regjeringen og han satt som guvernør for denne delstaten frem til 1989. Den 26. januar 1987, ble Rowland utnevnt til av Order of Australia. Etter at han var ferdig som guvernør satt Rowland som president for organisasjonen Royal Humane Society før han ble kansler ved University of Sydney 1990-1991. Han døde i mai 1999 i en alder av 76 år.