Ну, если вы не боялись держать умственно беспомощного дедушку рядом с детьми, имели возможность постоянно держать его в поле зрения - ваше право было оставить его дома. Хотя боюсь, ваша приверженность к дому была обусловлена скорее невозможностью оплатить пребывание в хорошем учреждении, чем нежеланием туда обращаться.