Не позволяйте ему так с собой разговаривать!  Начинайте отвечать жестко, вплоть до ссор, причем, по-мужски, коротко и ясно. Отстаивайте свою позицию, не опускайте руки. Я вашего мужа не знаю, но мой на время притихал и можно было как-то повернуть ситуацию в свою сторону на некоторое время.