Конечно бросайте. Если вы всерьез рассматриваете вариант бросить мужчину из-за неправильного возраста и советов подруг, очевидно, что это герой не вашего романа. Когда мужчину любят и хотят, все советчики идут лесом. А у вас так, рыба второй свежести. И какого он возраста - плевать.