首先，robots.txt 文件的缓存必须更新（我们一般最多将内容缓存一天）。您可以通过向 Google 提交更新后的 robots.txt 加快此过程。
即使在系统发现了更改后，抓取与索引编制过程也很复杂，有时对于个别网址的处理可能需要很久，因此无法给出准确的时间。另请注意，即使 robots.txt 文件禁止访问某个网址，该网址仍有可能显示在搜索结果中，只是我们无法抓取它。如果您想加速移除禁止 Google 访问的网页，请提交移除请求。