Robots ve Noindex’i Doğru Kullanmalısınız

Google’da içeriklerinizin taranmaması ve SERP sonuçlarınadahil edilmemesi için kullanabileceğiniz 2 farklı yöntem var. Birisirobots.txt, diğeriyse noindex etiketidir.

Robots.txt ile noindex etiketi arasında büyük bir farkbulunur ve ne zaman kullanılması gerektiği oldukça önemli durumdadır. Eğer birsayfanın taranmasını fakat SERP üzerinde gözükmemesi istiyorsanız noindexetiketini kullanmalısınız. Fakat bir sayfanın hiç taranmaması ve SERP’e dahilolmamasını istiyorsanız robots.txt dosyasını kullanmalısınız.

Robots.txt ve Noindex

Robots.txt dosyası veya noindex, ikisi de arama motorlarınayardımcı olabilecek olan 2 farklı uygulamadır. Her 2 yöntemde 1 internetsitesinin nasıl çalışabileceğine dair yönergeleri arama motorlarına iletir.Fakat ikisinin birbirinden farklı kullanım amacı vardır ve birbirleriylekarıştırılmamalıdır.

Noindex Ne Zaman Kullanılmalıdır?

Noindex etiketini herhangi bir sayfaya dahil ettiğinizdearama motorları o sayfayı tarar fakat SERP’e dahil etmez. Noindex etiketini,HTML sayfasının robots meta etiketi bölümüne yerleştirerek kullanabilirsiniz.

HTML sayfanızın robots meta etiketi kısımlarına dahilettiğiniz noindex etiketi, sayfanın robotlar tarafından görüntülenebilmesinifakat arama motorlarına dahil edilmemesini sağlayacaktır.

Robots.txt Ne Zaman Kullanılmalıdır?

Robots.txt dosyası, internet sitesi içerisindeki URL’lerinerişimine engel olur. ‘’Disallow’’ ile birlikte çalışır ve URL’e giriş yapmakisteyen arama motoru botuna izin vermez. Bu sayede bot, içeriği tarayamaz vedizine dahil edemez.

Herhangi bir sayfanın botlar tarafından işlenmesine,taranabilmesine ve dizine dahil edilmesine engel olmak robots.txt dosyasındaki‘’disallow’’ bölümünden yararlanmalısınız.

Genellikle Yapılan Hata Nedir?

Çoğu internet sitesi sahibi, aynı sayfa için hem ‘’noindex’’etiketi hem de robots.txt üzerinde ‘’disallow’’ kullanır. Bu durum, aramamotoru botlarınca sorunlara yol açabilir. 

Backlink Danışmanı