oluşturdum hocam ama yine olmuyor. Sıkıntı ne bir türlü anlayamadım

Selamlar; Burada gereken herşey yazıyor. Buradan bakarak oluşturun. İyi Günler.

User-agent: allow: / Bu kod bütün siteyi indexlemek içindir. User-agent: Bütün arama örümcekleri sitemi indexlesin demektir. Benim sitemi google indexlesin derseniz de bu kodu bu şekilde kullanın; User-agent:Googlebot Bunu tavsiteye etmem bütün arama motorları sitenize gelsin indexlesin.

Robots. txt dosyasından dolayı googlebot hem anasayfayı hemde sitemap'ı kaydedemiyor. Her çağırdığımda robots. txt tarafından reddedildi ibaresi ile karşılaşıyorum. robots. txt dosyamı hem User-agent: Allow: / hemde User-agent: Allow: şeklinde kullandım ama bir faydası olmadı. Yardım ederseniz sevinirim

http://susma.in/robots-txt-nedir-robots-txt-dosyasi-nasil-olusturulur/ İşinize yarayabilir...