しかし隠居後に、かつて直員が寵愛した家臣の平山弾右衛門による母里騒動が起こり、さらに直員自身も次男・直行を擁立しようと直道の廃立を試みるなどして、藩政のさらなる混乱を招いた。