Durante este periodo como caballero errante, Roberto tuvo varios hijos ilegítimos Uno de ellos, Ricardo, parece que pasó buena parte de su vida en la corte real de su tío Guillermo y, al igual que él, murió en un accidente de caza en New Forest, en 1099.