Robots.txt nedir? Robots.txt google panelde google ye sitemiz hakkında yol gosteren rehberdir.

bakıyorum sankı her sıtenın her yazılımın ayrı Robots.txt si varmıs gibi anlatımlar mevcut. arkadaslar bu ısın mantıgı soyle.

Masaustunde ıken sağ tıklatın ve yeni bir metin belgesi olusturun adınıda robots yapın. yaptınız mı bitti mi acın sımdı bunu en uste bunu yazın User-agent: * alt satıra gecın ve baslayın Allow: / google dizine ekle demek Disallow: google dizine ekleme demek. burada soyle ınce bir ayrıntı var allow kullanmanıza cokta gerek yok disallow la engellecek sayfaları belırtmenız yeterlıdır dısallow dısında kalan tum verılerı google ındexler. en alt satırada site harıtanızın yolunu gosterın ıslem bu kadar.


Kod:
User-agent: *

Disallow: /  ekleme demek
Allow: /       ekle demek

Sitemap: https://www.macawforum.com/sitemap.xml
Örnek:
Kod:
User-agent: *

Disallow: /members (üyeleri indexleme dedim)

Sitemap: https://www.macawforum.com/sitemap.xml
Son orneğe allow kodu girmedim cunku disallow dısında kalan tum dızınler allow ıslemı gorur...

Not: robots dosyanızı olsuturup ftp ye ana dızıne upload edınız.