Нет, автор, не надо "теперь придётся.". Вам надо сделать так,  как вы сами считаете нужным - чтоб прежде всего было хорошо вашим детям и вам самим.. Что там  сказал /не сказал брат маме, это их дела, не ваши.. Ваша забота - ваши дети.