Нет слова "не могу", есть слово "не хочу". Раз Вы так живете, принимаете его помощь, значит Вас все устраивает. Иногда напрягает, но, в целом, устраивает. Если не устраивает - живите своей жизнью, не берите ни копейки, строите свою жизнь и жизнь детей САМИ. Нравится мужчина - живите с ним, запретите брату это комментировать впринципе, прерывайте моментально, как тольк ооб этом заговорит. Дает ребенку аллерген - зибирайте у ребенка из рук. Не хотите  терпите, но не жалуйтесь. Значит, Вас все устраивает. Он не тиран, он - "опекун" п характеру, а Вы - инфант.