Fueron sus padres el capitán de las galeras reales Felipe de Borja y García de Cáceres, I marqués de Camachos (título del Reino de Dos Sicilias) e Ignacia del Poyo y Anrich.