Om å kvele mulige antikatolske følelser i fødselen ble Vilhelm sendt til det keiserlige hoff i Brussel. Her ble han etterhvert en av keiser Karls V nærmeste utenlandske utsending, og han hadde betydelige privilegier. Da Karl V ble trett av å utøve regjereriet fikk Vilhelm i oppdrag å bringe de keiserlige riksinsignier til Frankfurt. Vilhelm var i Breda i besittelse av en av de vakreste borger nord for Alpene, og Nassaupalasset i Brussel var viden kjent langt utover landegrensene.