Просто вы ему не особо нужны, его абсолютно устраивает сложившаяся ситуация: он встречается с вами на удобных ему условиях: ни больше, ни меньше. А не отпускает тоже потому, что ему так удобно - он привык, что вы под рукой, когда ему надо. Извините, если грубо, зато правда.