Holland har aflöst Stanhope som minister för kolonierna.