بله، با مراجعه به دادگاه خانواده و داشتن دلیل و برهان برای رد صلاحیت ولی قهری می توان او را عزل کرد.