ורהובן נולד ב-18 ביולי 1938 באמסטרדם לוים ונל ואן-שרדנברג. אביו היה מורה בבית ספר ואמו הייתה יצרנית כובעים. אף על פי שהוא נולד באמסטרדם, משפחתו באה מכפר הנקרא סליקר-ריבר. ב-1943, המשפחה עברה להאג, מיקום של מפקדת הגרמנים בהולנד במלחמת העולם השנייה. בית משפחת ורהובן היה כמעט בסיס צבאי גרמני המצויד במשגרי רקטות, שלבסוף פוצצו והופגזו בידי כוחות בעלות הברית. בית השכנים נפגע והוריו של ורהובן כמעט ונהרגו כאשר פצצה נפלה על רחוב סמוך. מאז אותה תקופה, ורהובן הזכיר בראיונות כי הוא זוכר תמונות של אלימות, בתים שרופים, סכנה ממשית וגופות בכל פינה ברחוב.