Нужно было сразу отстаивать свое частное пространство. С какой стати он просматривает ваш телефон и контролирует ваши встречи? Вы ему ничем не обязаны, вы свободны. Зачем вы позволили ему вами манипулировать? Я бы такие попытки сразу пресекла на корню. Не доверяешь - не встречайся!