Não, fique tranquilo. Mesmo com o recurso ativado, o Telegram oculta o seu número das outras pessoas. Assim, quando alguém clicar no seu perfil só conseguirá ver seu nome de usuário.