Чья квартира, в которой вы живете?  Если ВАша собственность - имеете полное право отказать.если мужа - также имеете право отказаться проживать вместе с его детьми. Он должен учитывать Ваши желания и интересы, а также Ваш комфорт, уют и здоровье. Вы не обязаны заботиться о его детях!  Есть и иные варианты - муж может снять квартиру для детей рядом, и жить (временно!) на два дома. Например, выходные проводить с вами,будни ночевать с детьми и т.д.В конце концов, дети не грудные, уже самостоятельные. Им требуется присмотр, режим, контроль с уроками, а уж еду разогреть, вещи постирать-погладить и сами могут.