Remove tenant settings