Если не нужны ни в каком виде, то и волноваться не вижу смысла. Зачем Вам тогда "у меня не то, что сердце колотилось, я вообще пошевелиться не могла. Меня накрыло с головой."? Если Вы к нему равнодушны, то просто так ему и скажите, что Вам не нужно это общение. А если нет, то избавьтесь от колочения сердца, накрывания с головой и т.п. Чем ходить и трястись, вдруг он опять позвонит и Вас опять накроет.