Почему? Это не слишком, это есть остаться человеком. Вырастил - это дарил защиту, плечо, заботу, понимание, поддержку. Кормил, одевал и издевался - это не вырастил, это завел куклу себе на потеху и использовал ее в качестве боксерской груши. Никаких проблем с совестью быть при нежелании иметь с такими людьми ничего общего, не может. Скорее проблемы с совестью должны возникнуть, если появится мысль загонять себя, а тем более, детей или мужей/жен в трудности, траты, некомфортную обстановку ради таких "вырастивших".