Настраивать и контролировать процессы индексирования и сканирования следует для того, чтобы:
ускорить попадание в выдачу нужных страниц,
улучшить ранжирование обновлённых страниц,
исключить попадание в выдачу ненужных страниц,
снизить создаваемую роботами нагрузку на сервер,
экономить ресурсы поисковых систем (краулинговый бюджет).
Управление индексацией позволит ускорить попадание и продвижение важных страниц сайта в результатах поиска, в то же время при попадании в индекс неактуальных страниц, дублей, страниц со спамным контентом возможна пессимизация сайта в поисковой выдаче.