十分恼怒，使得之后井上家同意与方圆社合作，而秀元则以「有松本在，本因坊家与之势不两立。」，而使当时碁界不能团结（其实当时方圆社的势力早已不须四家帮助）。
退位.1882年，秀元已当上家督三年，仍只有四段。彼时秀元在林家做家督的二哥秀荣因前家督柏荣遗孀喜美子（秀荣养母）终于去世，终于掌握林家大权。秀荣见弟弟一直不长进，使得本因坊家落魄至斯，隔年从林家复归本因坊家，彼时传统四家已可有可无，加上本因坊家历经两次大火，已毫无财产，而林家财产颇丰，秀荣因此没立新家督，反而将林家併入本因坊家，传