Oui, vous pouvez le faire en utilisant la directive robots.txt crawl-delay. Cependant, Google ne l’écoutera pas. Si vous souhaitez que Googlebot explore plus lentement que vous devez le configurer dans Google Search Console. Quelle que soit la méthode utilisée, il n'est pas recommandé de limiter les robots d'exploration de Google et de Bing. Leurs robots d'exploration sont suffisamment intelligents pour savoir quand votre site Web éprouve des difficultés, et ils reviendront plus tard dans ce cas.