El sexto duque de Devonshire, William Cavendish, conocido popularmente como el "duque soltero", fue el responsable de la apariencia actual del edificio.