1911年に、セツルメント運動の一環として妻とともに社会福祉施設・有隣園を設立したほか、同年嘉納治五郎とともに大日本体育協会(現日本体育協会)を設立してその理事となり、嘉納と日本オリンピック委員会(joc)を設立。