В нашем случае в слове "бывшая жена" ключевое слово- БЫВШАЯ. То есть ее нет в настоящем времени. Муж с ней не общается, меня она не достает, так что о ней и не вспоминаем, ее просто нет в нашей жизни, а потому никак к ней не отношусь.