望幽谷最早被當地人稱為「大湖頂」，民國50多年時，有位八斗子當地人帶領一群大學生來這兒玩，當時因為軍事考量還設有海禁，一般人是無法去到海邊，只能在山谷這邊遊玩，但即使只有山谷美景，也已經讓他們玩到拋開一切煩憂樂而忘返，便幫這處美景取名為「忘憂谷」。