Infelizmente sim. Se não for feito da forma correta, você pode perder anos de conquista de autoridade com o Google. Isso acontece porque quando se altera a URL de um site, o buscador precisa indexar novamente todas as novas URLS e entender, com isso, que houve uma mudança.  Portanto, antes de realizar essa migração, considere o uso de redirecionamentos, das páginas antigas para o endereço correspondentes das novas; atualização do sitemap no Google Search Console (se o utiliza) e verificação de erros, principalmente de redirecionamento e inacessibilidade. É importante frisar que o processo de reindexação do Google leva um tempo indeterminado. Portanto, deve ser completamente esperado anormalidades no tráfego e uma diminuição consistente nos dias seguintes à alteração.