Прямо скажите ему, что любовь-морковь ему не светит с вашей стороны.  И не инициируйте общение сами.  Если его устроит дружба, он даст вам это понять.  Но, к сожалению, не думаю, что у вас получится дружить.  Держать человека "при себе" жестоко, вам же потом выйдет боком.