Meta Robotlar Kullanarak Arama Motorlarından Web Sayfalarını hariç tutma Etiketler - mankenler

Bir arama motoru örümceğinin Web sitenizdeki belirli sayfaları taramasını önlemek için Meta robot etiketleri kullanabilirsiniz. Robotların o sayfayı dizine eklememesini veya o sayfadaki bağlantıları izlememesini söylemek için sayfanın HTML koduna özel bir etiket ekleyebilirsiniz. Bu etiketi, bir Web sayfasının baş bölümünde bulunan HTML kodunun parçası olan diğer Meta etiketlerinden () sonra yerleştirirsiniz.

Meta robots etiketlerini kullanmak, site çapında bir robot metin dosyasını iki nedenden dolayı kullanmaktan daha az verimlidir. İlk olarak, robotlar bazen Meta robot etiketlerini yoksayar ve ikincisi, bu etiketler sayfalarınızı okuyan robotları yavaşlar; bu da taramaya istekli oldukları sayfa sayısını azaltabilir. Ayrıca, bu yöntem, Web Yöneticisi baş ağrılarınızı verebilir, çünkü etiketler merkezi bir dosyada değil, ayrı sayfalarda korunmalıdır.

Aşağıdaki Meta robots etiketi, arama motoru robotunun sayfayı ve sayfalarını dizine eklememesini ve sayfadaki bağlantıların hiçbirine uymamasını söyler:

Bu etiketi kullanabilirsiniz robotun sayfanın içeriğini okumasını ve dizine eklemesini ancak herhangi bir bağlantıyı izlememesini söylemek için:

Bir sonraki etiket, robotun sayfanın içeriğini yok saymasını ancak aşağıdaki bağlantıları izlemesini sağlar: