В русском языке предлог "от" не всегда  эквивалентен "в связи" или "из-за".  Иногда это указание на место в пространстве."Он убежал от телефона/дороги/остановки". Вот ваш сын удалился от вас. Он физически не рядом с вами, а потому вы на него уже постоянного и непосредственного влияния не оказываете.   Все остальное это как раз ваша буйная фантазия, которую мы тут уже неоднократно наблюдали.  Опять приписали собеседнику смысл, который он не вкладывал.