やがて、戦争が終わり、金閣と「私」（溝口）とが同じ世界に住んでいるという夢想も崩れた。金閣寺のまわりには娼婦を乗せた米兵のジープなど俗世のみだらな風俗が群がるにいたった。溝口は住職の老師の計らいで入学した大谷大学（仏教系大学）で、両足に内反足の障害をもち、ぬかるみの中を一歩一歩進むような不自由な歩行で移動し、いつも裏庭で一人離れて弁当を食べている級友・柏木と出会う。一見した柏木の障害に自分の吃音を重ね合わせ、僅かな友人を求めるべく話しかけた溝口だったが、柏木は女を扱うことにかけては詐欺師的な巧みさを持ち、障害を逆手にして高い階層の女も籠絡している男であった。障害を斜に構えつつも克服し、確信犯的に他人への心の揺さぶりを重ねることでふてぶてしく生きる柏木を、一旦感銘しながらも不自然で刺々しい生き方だと溝口は思ったが、精神的な距離を置きつつ友人となった。柏木の批評はいつも辛辣で、溝口の心の揺れや卑怯も鋭く指摘した。溝口は、そんな柏木から女を紹介されるが、女を抱こうとした時、目の前に金閣の幻影が立ち現れ、失敗に終わった。
溝口が女の美を目の前にすると、いつも金閣が現れていたが、溝口はある日、菊の花と戯れる蜂を見ている時、自分が蜂の目になって、菊（女、官能の対象）を見るように空想する。その時、ふと、自分が蜂でなく人間の目に還ると、それはただの「菊」に変貌した。その蜂の目を離れた時こそ、自分が金閣の目をわがものにしてしまい、生（女）と自分の間に金閣が現れ、性的な自己の存在を無価値化してしまうという構造に行きつく。このように金閣（虚無）の目で見、変貌した世界では、金閣だけが形態を保持し、美を占領し、この余のものを砂塵に帰してしまうことを溝口はおぼろげながら確信してゆく。