Sin embargo, su hermano Carlos Manuel no tuvo hijos y abdicó el 4 de junio de 1802 en el Príncipe Víctor Manuel que sólo tenía cuatro hijas vivas cuando abdicó en Carlos Félix en 1821, por lo que éste heredó el trono al ser el pariente masculino de grado más cercano.