Вы считаете, что "уведя" его из такой (видимо, по-вашему неполноценной) семьи вы останетесь в "белом"? Всё равно найдётся тот, кто осудит. А моральные права вы даёте или не даёте себе сами, в зависимости от своих представлений о хорошем и плохом.