Если вас это сильно смущает - то намекните ему об этом, думаю просто получите в очередной раз подтверждение что "вы самая желанная и нужная", и это будет правдой. Лично я очень ценю предоставляемую мне степень свободы и плачу за нее ответно.  А насчет далеко - продолжайте оставаться ему интересной и любить себя и будет все замечательно)