En el siglo XVIII el castillo pasó a ser propiedad de John Stuart, tercer Conde de Bute, quien se convirtió gracias a su mujer, perteneciente a la familia Herbert, en un gran latifundista, y cuyos herederos desarrollaron los muelles que transformaron Cardiff, que pasó de ser un pueblo pesquero a un gran puerto durante el siglo XIX.