Chcę zablokować folder prywatny. Czy mogę uniemożliwić innym osobom odczyt mojego pliku robots.txt?
Nie. Plik robots.txt może odczytać dowolny użytkownik. Jeśli nie chcesz, aby nazwy folderów lub plików z treścią były publiczne, nie wymieniaj ich w pliku robots.txt. Odradzamy udostępnianie różnych plików robots.txt w zależności od klienta użytkownika lub innych atrybutów.