Короче, автор. Пропадать без объяснений действительно некрасиво. Поэтому свяжитесь с ним, в разговоре четко дайте понять, что вы глубоко замужем. Вежливо попрощайтесь и удалите его из скайпа (это обязательно). На работе при встречах общайтесь сдержанно, как обычные коллеги.