Я не поняла, а почему надо всем вместе везде ходить? Гулять-вместе и домой-вместе? Решили они домой - пусть идут, а Вы так и скажите, что Вам хочется побыть на свежем воздухе дольше. А место для гуляния тоже не корректируйте, не хотят далеко "от крана" уходить, пусть вокруг него гуляют, а Вы с сыном идите туда, куда хотите. Раз-два так сделаете, мамашка задумается.