Hermano menor del político español Francisco Fernández Ordóñez, está casado con Inés Alberdi (actual Directora Ejecutiva del Fondo de las Naciones Unidas para las Mujeres, UNIFEM) y tiene dos hijos.