Не поняла - из гостей Вы ушли в дружеском расположении или ушли после этого напряжного разговора? Как Ваш муж мог пригласить без разговора с Вами людей, в присутствии которых возник явный напряг, конфликт и не понимание?  Это очень странно и повод задуматься о ваших отношениях! Ну и разумеется его позиция в плане Вашей работы вполне понятна- он бы хотел, чтобы Вы вышли на работу.