Вы имели полное право сказать, что не хотите продолжать общение. Для этого не нужно ни с кем советоваться. Это ваша жизнь, ваше время, ваше желание. Все, что мог нормальный мужчина после этого сделать - или уважительно принять ваше решение, или сказать - "ты мне очень нравишься, дай мне еще шанс, давай продолжим дружеское общение, а там уж как ты решишь, так и будет".