Merhabalar;
Oncelikle google'da cabucak indexlenme konusunun sadece bir bolunumu anlatacağım sizlere Robots&Sitemap hakkında bir Makale olacak...

Oncelikle;
SiteMap Nedir?
SiteMap sitenizin krokisidir her sayfanın linklerini barındırır indexlenme icin cok onemlidir.sitemap konusunda anlatılacak birşey yok...

Online Sitemap oluşturmak icin: BURAYA TIKLA!!
Ayarlar;
Starting URL: http://siteadi.com/
Change frequency: none
Last modification:Use server's response
Priority: none

Sonunda "Start" butonuna basın ve sitemap yapımı icin bekleyiniz...

veeeeee;
Your sitemap is ready!
Yazısı Cıkınca
1. Download the sitemap file here and upload it into the domain root folder of your site

"here" kelimesine basarak sitemap.xml dosyanızı indirin ve sitenizin ana dizinine atın!

Robots.txt Nedir?
Oncelikle arama motorlarının orumcekleri(botları) sitenize ilk olarak kok dizine yani ana dizin olarak robots.txt dosyasına bakarlar... Gorevi hangi sayfaların indexlenmesi gerektiğini arama botlarına gostermesidir. robot.txt dosyasını alt dizine değilde ana dizine yerleştirmeniz indexlenmekonusunda cok onemlidir.

a)İndexlemesini engellemek
Tum robotların sitenizin hicbir sayfanızı indexlemesin istiyorsanız;
User-agent: *
Disallow:

sitenizin tamamının tek bir robot tarafından indekslenmesini engellemek istiyorsanız;
User-agent: Googlebot
Disallow: /
User-agent: *
Disallow:


Tum robotların sitenizin tamamını indekslemesini engellemek icin;
User-agent: *
Disallow: /

b)İndexlemesine İzin Vermek;
Tum robotların sitenizin her sayfasını indekslemesini istiyorsanız;
User-agent: *
Allow:

sitenizin tamamının tek bir robot tarafından indekslenmesini istiyorsanız;
User-agent: Googlebot
Allow: /
User-agent: *
Allow:


Tum robotların sitenizin tamamını indekslemesini istiyorsanız;
User-agent: *
Allow: /

Not: Otomatik robots.txt dosyası oluşturmak icin: BURAYA TIKLAYINIZ!
Ayarlar;
1-Default - All Robots are: Allowed
2-Crawl-Delay: Default - No Delay
3-Sitemap: Sitemap adresinizi girin
4-Specific Search Robots: Hepsiniz Allowed secin

Gerisini ellemeyin "create robots.txt" basın ve cıkan kodu not defteri ile acıp robots.txt diye kaydedin sitenizin ana dizinine atınız!


İyi Forumlar // Rafet Ozay