Wielkość liter w regułach w pliku robots.txt jest rozróżniana. W takiej sytuacji najlepiej użyć metod wyboru strony kanonicznej, aby mieć pewność, że tylko jedna wersja adresu URL jest indeksowana.
Dzięki temu plik robots.txt może mieć mniej wierszy, co pozwala łatwiej nim zarządzać. Jeśli nie możesz tego zrobić, wymień typowe kombinacje nazwy folderu lub jak najbardziej ją skróć, używając tylko kilku pierwszych znaków zamiast pełnej nazwy. Na przykład zamiast podawać wszystkie wersje nazwy /MyPrivateFolder z wielkimi i małymi literami, wymień tylko wersje nazwy /MyP (jeśli masz pewność, że nie ma innych dostępnych do indeksowania adresów URL z takim początkiem). Możesz też użyć tagu meta robots lub nagłówka HTTP X-Robots-Tag, jeśli indeksowanie Ci nie przeszkadza.