Идти и разводиться. Когда будете иметь развод на руках, то в случае шантажа будете ему его показывать. Если не идете и не можете выбрать, да еще и измучились - значит вам нравится эта ситуация. Иначе никак не могу объяснить ваше медлительность в постановке последней точки в отношениях.