Ну, оно конечно иногда можно и помолчать... только мне кажется, что боятся такого слабые люди, не уверенные в себе. Сейчас вы его особо не дергайте, а тихонько продолжайте общаться, он увидит, что вы не страшная ведьма, и опять начнет к вам тянуться и это будет хорошо (а не начнет - не ваше значит)