вам бы спокойно с ним поговорить, расписать все траты и доходы, вряд ли взрослый вменяемый человек совсем на пустом месте будет так говорить. вам с ним не спорить надо было а послушать почему он считает что вы ипотеку без него не взяли бы, что за вложения были и тп.