Сказать, что вы не собачка или котята, что бы вас выгоняли и возвращали когда хочется. Спросите сыну обидно когда его обижают? Получите подтверждение и дополните, что выгонять из дома ни кого нельзя, это худшая из обид. И папа обидел этим Вас лично. А дальше распишите + отдельного проживания: папа будет скучать без сына и значит на выходные проводить с ним время и дарить игрушки, будет любить еще больше. И мама не будет нервничать и теперь у нее появится больше времени проводить с любимым сыном и делать вместе все что им захочется. Не вижу проблемы. Или ждете апогея?