В общем автор,  мне вас понять действительно трудно.  То вы пишете,  что семьёй,  то,  что у вас было,  и назвать нельзя. То, что всё было в общем "как у всех".  Возможно,  что ваш сын точно также не понимает,  почему вы не хотите больше жить с его отцом,  считает это вашим капризом и боится,  что вы точно также можете из-за каприза и от него избавиться.