ブラバント公国でベルナールトの父ヴァレンティン・ファン・オルレイ(1466年ごろ-1532年)が生まれたが非嫡出であり、貴族としての血統を受け継ぐことはできなかった。