Не успокаивайте себя. Ребенок растет нервный, потому что в такой обстановке никто не был бы спокойным. Вам еще повезло, что у него, видимо, крепкая психика от природы. Другой бы уже у вас либо заикался, либо энурезом страдал, либо скандалил бы с утра до вечера от таких родителей и такой жизни с ними.