Các trang không được lập chỉ mục về "bot" thì sẽ không có trên trang kết quả của công cụ tìm kiếm vì chúng không nằm trong cơ sở dữ liệu. Do đó, bài viết sẽ không nhận được bất kỳ lưu lượng truy cập tự nhiên nào. Đó là lý do tại sao, trong quá trình tối ưu hóa SEO, việc index là rất quan trọng đối với các trang dự kiến ​​sẽ đạt được lưu lượng truy cập không phải trả tiền.