Wordpress sitesi olanların Google için en uygun robots dosyası aradıklarını düşünüyorum. Botların sitenizde hangi dizinleri ziyaret edip etmemesi ile ilgili oluşturmanız elzem olan bir dısya robots.txt. Peki bunun için hazır olarak kullanabileceğiniz bir dosya var mı?

Evet var ve şimdi sizler için paylaşıyorum.

WordPress için hazır Robots.txt dosyası içeriği

Sitemap: siteadresi.com/sitemap.xml

User-agent: Googlebot

Disallow: /wp-content/
Disallow: /trackback/...

Wordpress sistem için en iyi robots.txt dosyası