Непременно надо говорить с ним? Он вам дал время на размышление и ждет ответа к часу икс, стоя на подоконнике двадцатого этажа? Я бы сделала вид, что ничего не было, а если бы кто-то мне напомнил об этом, округлила бы глаза и сказала бы, что если они не в курсе - я замужем, да и "жених" женат, так что пъяные признания считаю максимум шуткой. И ещё: а как это сотрудникам приходит в голову сватать вас с кем-то? Почему они всерьез не воспринимают ваш брак? Ну либо всё это и правда было неумной шуткой, которую вы просто не поняли.