En 1844, se llevó a cabo una extensiva labor de reconstrucción y ampliación del castillo, casi triplicando su tamaño, bajo la supervisión del arquitecto James Gillespie Graham.