Я бы так не ответила никогда просто в ответ. В вашем случае извиняться не стоит, в приницпе - обмен любезностями. Если же это уже не первый случай и мужик раздражает вас, то вполне возможно, что и я бы и ответила как-то так, но это было бы продуманной акцией в том смысле, что я хотела бы прекратить с ним общение, и намеряно что-то такое сказать, чтоб обратного пути не было и адьёс. Спонтанно по больному не бью, мне жалко людей, если человек не давал поводов себя ненавидеть. вижу недостаток существенный и кредит терпения к этому человеку у меня повышается.