Все логично. Если действительно с его стороны были такие чувства, как вам представляется, то представьте, как он измучился за эти 6 лет. С другой стороны, он мог сразу не рассматривать ваши отношения как серьезные, поскольку вы были замужем (и срок отношений тут не имеет никакого значения). Ему нужно было строить свою жизнь (ваша-то была построена), он все сделал правильно. Вам надо было раньше перестать сидеть на двух стульях, а теперь уж ничего не поделаешь - пожелайте ему счастья и ищите другие варианты.