Автор,а какие у вас с мужем в целом отношения? Вы чувствуете с его стороны любовь к себе? Если да,то принять это как неудачную шутку и не париться (тем более,что он извинился).А вот если отношения оставляют желать лучшего,тогда да,есть повод задуматься о том,правильный ли вы сделали выбор.