Так как он потом, при встрече (после Вашего ухода)  отреагировал? Обошел молчанием, или ... ?Ну и, если в усложнение, а что Ваш супруг думает о таких командировках с шефом и прочих рабочих слухах об отношениях? Никто ему пока еще не "заложил"? И еще ... муж знает про то самое "жили немного"? А сами то что хотите?