Hijo de Juan José Duarte Rodríguez (próspero comerciante peninsular procedente de Vejer de la Frontera, Cádiz, España) y de Manuela Diez Jiménez (natural de El Seybo, hija del colono español Antonio Díez Baillo y de la criolla Rufina Jiménez Benítez).