また女性との交遊も多く、これが夫人波津子と岡倉天心の不倫の一因になったとされる。