Да, вам к психиатру. К психологу точнее, конечно. Он вероятно сможет донести мысль, что ребенок не виноват, что вы устали, и поможет правильно организовать свой день так, чтобы и себя радовать тоже удавалось. Тогда и малыш раздражать не будет.