Не надо "пофик". Дайте понять, что такая ситуация вас напрягает, что вам больно оттого, что Вы "номер два". Что если он любит вас, то не должен делать вам больно. Что вам нужен он целиком, а не на два часа после работы. Что его отношение к вам, как к "номеру два", разрушает вашу любовь, и отношения закономерно придут к финалу. Не ультиматум, а человеческий разговор. Он переварит и сделает для себя вывод. Смотрите на дела: если не помогает вам в повседневной жизни, не ходит с вами "в свет", не посвящает вам свое свободное время в выходные и отпуска, то прогноз неблагоприятен, т.е. он вошел в отношения с вами, потому что легкодоступный секс. Попытайтесь секс сделать чуть более труднодоступным и смотрите, будет добиваться или отступится.