Он злится и на вас, и на себя. За то, что не такой, как все. К тому же вы его бросили, а теперь забрали, но он чувствует себя чужим в вашей семье. Это ужасно, и сочувствие в данной ситуации вызывает именно ваш сын, а не вы. Что вам  делать - принять сына таким, какой он есть и дать ему максимум любви и заботы. Но вряд ли вы сможете это сделать   Весь ваш пост пропитан жалостью к себе, а не к сыну.