"Скорее всего" не означает что был приворот. Это только догадки и домыслы. Тем более, что Вы сами говорите, отец был любитель женщин. И откуда Вам знать, собирался он уходить из семьи и нет? Он что, с Вами планами делился? Чужая душа-потемки. Вам, конечно, легче все объяснить мистикой, чем допустить, что это был выбор Вашего отца.