Отвечаете Вы агрессивно всем кто имеет другую точку зрения - например о "личном пространстве", и совсем необязательно что они были агрессивны к Вам лично.Думаю что и с мужем вели себя агрессивно, и не раз, поэтому он Вам тоже отвечает агрессивно. Что совершенно не значит что он Вам изменяет, а значит лишь что Вы его достали со своей паранойей. Уверен что его выпады в Вашу сторону в духе "что это ты гуляешь, и на работу блядовать ходишь" - это защитная реакция чтобы показать Вам что на это нечем возразить, даже если Вы ему никаких поводов не давали.