यह खासकर तब इस्तेमाल होता है, जब आप गैर-एचटीएमएल फ़ाइलों, जैसे कि ग्राफ़िक और दूसरे तरह के दस्तावेज़ों के इंडेक्स होने को सीमित करना चाहते हैंं.
This is especially useful for limiting the indexing of non-HTML files, such as graphic files and other types of documents.