Eustace ble i 1103 gift med Juliana eller Juliane de Fontevrault (født ca. 1090), en illegitim datter av kong Henrik I av England og en kvinne som kanskje het Ansfride.