Ives era hijo ilegítimo de un oficial del ejército inglés y una baronesa española.