En 1559 pasó a manos de la familia Gonzaga de Mantua, realizándose en esa época la fortificación de la ciudadela.