Su rama familiar se trasladó al Ducado de Brabante, donde nació su padre Valentin van Orley (h.