bilgilendirme için teşekkürler elif

User-agent: Googlebot Disallow: /subat/files/search

teşekkürler verdiğiniz bilgilerle robots. txt oluşturdum.

merhaba daha önceden başkası tarafından kayıt edilmiş bir domaini satın aldım, domain bir süre park ta kalmış ve google dizininde şuan ww8. domainim.com şeklinde bir indexlenmiş sayfası var. bu sayfayı robots txt ile nasıl kaldırabilirim ;? webmaster tools dan ur kaldırma isteği ancak www. domainim.com /kaldırmak-istediğim-sayfa seklinde verilebiliyor. Dolayısıyla ww8. yı belirtemiyorum orada

index. php? gibi linkler için

Googlebot'un? içeren URL'leri taramasını engellemek için taramasını engellemek için): User-agent: Googlebot Disallow: / ?

ertunc_58' Alıntı:

Robots. txt dosyasını kullanarak sayfaları engelleme veya kaldırma Googlebot'un sitenizdeki sayfaları taramasını önlemek için bir robots. txt dosyası kullanabilirsiniz. Örneğin, robots. txt dosyasını el ile oluşturuyorsanız, Googlebot'un belirli bir dizindeki tüm sayfaları taramasını önlemek için aşağıdaki robots. txt girişini kullanırsınız: User-agent: Googlebot Disallow: /lemurlar Googlebot'un belirli bir dosya türündeki tüm dosyaları taramasını engellemek için aşağıdaki robots. txt girişini kullanabilirsiniz: User-agent: Googlebot Disallow: / . gif$ Googlebot'un? içeren URL'leri taramasını engellemek için taramasını engellemek için): User-agent: Googlebot Disallow: / ? robots. txt tarafından engellenen içerik sayfalarını taramamamıza veya dizinlerini oluşturmamamıza karşın, bunları web üzerindeki diğer sayfalarda bulduğumuz takdirde URL'leri tarayıp dizinlerini oluşturabiliriz. Sonuç olarak, sayfanın URL'si ve büyük olasılıkla herkesin kullanımına açık olan site bağlantılarındaki metin veya Açık Dizin Projesi'nden bir başlık gibi diğer bilgiler Google arama sonuçlarında görünebilir. Ancak, sayfalarınızın hiçbir içeriği taranmaz, dizine eklenmez veya görüntülenmez. Bir sayfanın, başka sitelerde bu sayfa için bağlantı olsa bile Google dizinine eklenmesini bütünüyle önlemek için bir noindex meta etiketi kullanın ve sayfanın robots. txt dosyasında görünmemesini sağlayın. Googlebot sayfayı taradığında, noindex meta etiketini tanır ve URL'yi dizinden çıkarır.

sil birşey olmaz

yararlı paylaşım :harika: Ayrıca robots. txt den bahsetmişken mutlaka robots. txt ye sitemap urlsi eklemek gerekir. En alta Sitemap: http://siteadresi/sitemap. xml Bu şekilde arama motorları sitemap adresini otomatik algılayıp, siteyi daha kolay tarayacaklar.

+rep teşekkürlerrr

ozaman ben şimdi http://www.evosangels.com/subat/files/search/searchtext. xml adresini engellemek için robots. txt ye şunu mu yazmam lazım? User-agent: Googlebot Disallow: /http://www.evosangels.com/subat/files/search yoksa? User-agent: Googlebot Disallow: /subat/files/search