Фраза "мне нужно время" это вежливая форма "не трогай меня пока". Почти прямым текстом. Если не будете трогать, может и будет еще приходить. На вашем месте я бы написала, "не вопрос, не буду трогать, захочешь, знаешь где меня найти", чтоб он не думал, что вы обиделись. И больше бы не писала. Но в общем, то, что сейчас дистанцируется, признак плохой. И никакими словами "утешения" вы лучше не сделаете. Я бы сделала паузу, иногда о себе напоминала ненавязчиво. Мож пройдут у него муки совести. ну и еще намекнула бы ему, что вам собственно от него ничего не нужно, кроме...