时期，遇上学制改革。1951年，因身体检查发现患有肺浸润，因而中学休学，在家中休养，埋首于费奥多尔·米哈伊洛维奇·陀思妥耶夫斯基、谷崎润一郎、福田恆存、大冈昇平的作品中。1953年，报考东京大学文科第二类（即相约现在的文科第三类）不成功，改读庆应义塾大学文学系（教养课程）。因为被日比谷高中的教师侮辱「读庆应就该选经济系，什么？你选文科？你也太自大了。」，因此发誓以后绝不踏入日比谷高中的大门。可是在江藤晩年，却为日比谷高校的OB讲演会「Twilight forum」讲演，原因是自己的内心已经释怀。