Sus padres fueron Domingo Pérez de Guzmán y Silva, XIII duque de Medina Sidonia y de Josefa Pacheco y Moscoso (1703-1763), hija del IX duque de Escalona y de su segunda esposa Catalina Teresa de Moscoso Osorio y Benavides, hija del VIII conde de Altamira.