Tarama arama motoru orumcekleri tarafından sitenizin tespit edilmesi sureci anlamına gelmektedir.

Sitenizin mimarisi buna uygun değilse veya sitenizdeki dahili linkler yeterli seviyede değilse ve bir sitemap.xml dosyasına sahip değilseniz bu orumceklerin sitenizi bulması cok kolay olmayacaktır.

Buna ek olarak, sitenizde yer alan cok fazla sayıdaki 404 hatası sitenizi taranmasını ve indekse eklenmesini zorlaştıracaktır.

Sitenizde uygulamakta zorlanacağınız teknik detaylar sitenizin orumcekler tarafından taranmasını zorlaştıracaktır. Burada en onemli cozum SEO konusunda profesyonel olan kişilerin takip ettiği yolu takip etmektir.

robots.txt dosyasının icerisinde “Disallow: /” şeklinde bir ibarenin olmadığından emin olmalısınız. Eğer bu ibare varsa arama motorları sitenizi indekse eklemeyecek cunku sizden gelen talimat doğrultusunda sayfalarınızı taramadan gececektir.

“Disallow: /” ile “Disallow:” komutlarını birbirine karıştırmamanız gerekmektedir. Birincisi arama motorlarının sayfalarınızı indekse eklememesini sağlar. İkincisi ise arama motorlara sayfaların taranabilir olduğunu gostermektedir. Aradaki farklılık bu şekildedir.

Sitenizin tam anlamıyla istediğiniz gibi fonksiyon gostermesini istiyorsanız onun en başından beri taranabilir olmasını sağlamalısınız.

Sitenizin taranabilir olduğunu kontrol etmek icin denetimleri beklememelisiniz. En başından bunu kontrol etmeli, kurulumda her şeyi doğru yapmalı ve yolunuza devam etmelisiniz.