Вы не замарались, начав общение с женатым? Для уважающих себя дам такое неприемлимо. Так что же вас теперь смущает? Встретились со свободным , пусть и разведенным, и женатого из семьи  увела-две большие разницы. Муж ваш платит за своё же лядство  с вами. Чувство вины, да. И вы в этом поучаствовали. Разводитесь, если не устраивает такая оплата. Та семья пострадавшая, в том числе и от вас. Воспринимайте его выплаты, как репарацию