Да все верно говорит ваш психолог, и вы абсолютно правы, автор. Откуда у отца может взяться любовь и желание заботиться о ребенке, если его "не нагружать" этим самым ребенком? В вашем случае, если вы по каким-то причинам  не хотите уходить от этого человека (хотя чистое ИМХО описанное вами жлобство - достаточное основание к этому) - только телефон отключать. Поверьте, за полдня ничего страшного с нормальным здоровым ребенком не сделается. Если отец не совсем неадекват. Но, думаю, был бы неадекватом - вы бы и сами не оставили.Ездить на машине к вам на работу - идея плохая. Муж вам будет названивать что из дома, что из ближайшего сквера. И вы будете бесконца рваться на части. Какая уж тут работа.Только блокироваться. Во время вашей работы для домочадцев вас не существует. И все, без вариантов.