Preciso incluir uma diretiva allow
para permitir o rastreamento?
Não, não é necessário incluir uma diretiva allow. Todos os URLs são
permitidos de forma implícita, e a diretiva allow é usada para substituir
diretivas disallow no mesmo arquivo robots.txt.