Вы можете все закончить. Для этого достаточно не выходить с ним на связь и не отвечать на его сообщения, если они вдруг будут. Куда вы полезли в его развод и его семью? Он вас туда не звал. Желать вы можете все, что угодно, но для реализации нужно чтобы он желал того же, а он, очевидно, не желает.