1915年（大正4年）時任行政裁判所（相當於最高行政法院）部長、本身亦係法學博士嘅渡邊廉吉，擔心舊長岡藩嘅名門、作為家臣團之一世代侍奉藩主牧野氏嘅山本家會絕後，所以就打算畀高野五十六以養子嘅身份繼承山本家；