Otro de los duques, Robert Adam, realizó planes para construir diversos edificios en el jardín así como una nueva puerta para el castillo.