Anna Victoria war eine Tochter von Ludwig Thomas von Savoyen, Graf von Soissons (1657–1702), älterer Bruder des Prinzen Eugen. Dieser hatte 1680 tief unter seinem Stand geheiratet und war daraufhin enterbt worden. Er fiel gleich zu Beginn des Spanischen Erbfolgekrieges in kaiserlichen Diensten bei Landau in der Pfalz und ließ seine Familie völlig verarmt zurück.