Arama motorlarının sayfanızı nasıl taradığını, saklayıp sonuçlarda nasıl gösterdiğini belirleyen küçük kodlar vardır. Robots meta etiketi ve X-Robots-Tag başlığı üzerinden verilen bu yönergeler, doğru kullanıldığında site yönetimini kolaylaştırır; yanlış kullanıldığında ise trafik kaybına yol açabilir.
Nofollow: Bağlantılara güven vermemek
Nofollow, arama motoruna bir bağlantıyı takip etmesini ya da o bağlantı üzerinden sinyal aktarmasını istemediğinizi söyler. İki şekilde kullanılır. Sayfadaki tüm bağlantılar için meta etikette content=”nofollow” değeri verilebilir. Tek bir bağlantı için ise bağlantının rel özelliğine nofollow yazılır. Reklam ya da sponsorlu içerikler için rel=”sponsored”, kullanıcı yorumları ve forum gönderileri için rel=”ugc” değerleri de vardır. Güvenmediğiniz kaynaklara verilen bağlantılarda, ücretli yerleşimlerde ve denetleyemediğiniz kullanıcı içeriklerinde bu işaretlemeyi tercih edin. Güncel yaklaşımda bu değerler kesin emir değil, ipucu olarak değerlendirilir.
Noarchive: Önbellek kopyasını kapatmak
Noarchive, arama motorunun sayfanın önbelleğe alınmış kopyasını kullanıcıya sunmasını engeller. Sayfa yine dizinde yer alır ve sonuçlarda görünür; yalnızca saklanan sürüme erişim kapanır. İçeriği sık değişen sayfalarda, üyelik gerektiren alanlarda ya da eski sürümün görünmesini istemediğiniz kampanya sayfalarında işe yarar. Bugün birçok arama motoru önbellek bağlantısını göstermediği için bu yönergenin etkisi eskisine göre sınırlıdır, ancak yine de politika gereği ek güvence olarak eklenebilir.
Nosnippet: Sonuçtaki özeti kısıtlamak
Nosnippet, arama sonucunda sayfanıza ait metin özetinin ve video önizlemesinin gösterilmesini engeller. Başlık ve adres görünmeye devam eder. Bu yönergenin tıklama oranını düşürebileceğini unutmayın; kullanıcı sayfanın ne sunduğunu göremezse tıklamayabilir. Daha ince ayar için max-snippet:[sayı] değeriyle özetin karakter sayısını sınırlayabilir, data-nosnippet özelliğiyle de yalnızca belirli bölümleri özetin dışında tutabilirsiniz. Ücretli içeriklerin ilk paragrafını korumak için bu yöntem daha dengeli bir çözümdür.
Uygulama ve sık yapılan hatalar
Yönergeleri sayfanın head bölümüne meta etiket olarak ekleyebilir, PDF gibi HTML olmayan dosyalar için sunucu yanıt başlığını kullanabilirsiniz. Birden fazla değeri virgülle ayırarak birleştirmek mümkündür; örneğin nofollow, noarchive. En sık görülen hata, robots.txt ile taramayı engellediğiniz bir sayfaya meta yönerge eklemektir. Tarayıcı sayfaya giremezse etiketi göremez ve yönerge işlemez. Bir diğer hata da test sırasında eklenen noindex ya da nofollow etiketlerinin yayına çıkarken kaldırılmasının unutulmasıdır.
Bu üç yönerge farklı işler yapar: bağlantı sinyallerini, önbellek kopyasını ve sonuç özetini ayrı ayrı yönetir. Hangisini neden eklediğinizi belgeleyin, yayına almadan önce sayfa kaynağından kontrol edin ve Search Console gibi araçlarla etkisini izleyin.