Fue nieto de Fernando de Valdés y Quirós, asistente y superintendente de Sevilla e intendente general de las tropas de Andalucía, y sobrino carnal del otro capitán general de la Armada de su mismo apellido: Antonio de Valdés y Fernández Bazán (1744-1816), secretario de Estado y del Despacho Universal de Marina e Indias, bailío sanjuanista, caballero del Toisón de Oro.