其义父为曾任原贵族院议员的德川庆喜家第3代当主德川庆光公爵；其义弟德川庆朝是着名的摄影家。庆应义塾大学法学部毕业后，进入日东纺织工作了11年。后来先后担任着名政治家佐藤荣作和中川一郎的秘书。1976年和1979年两次竞选众议院议员均落败，终于在1980年的大选中在旧冈山1区成功当选，之后连续当选了9次。期间，平沼和政见相近的保守派自民党议员石原慎太郎、龟井静香、中川昭一等人经常共同行动。他在自民党内开始时属于中川集团（自由革新同友会），中川一郎自杀后，加入志帅会，并成为初代事务总长。平沼有较为浓烈的